Reddit espère qu’une modification de robots.txt fera l’affaire pour effrayer les scrapers de données d’entraînement en intelligence artificielle.

Pour de nombreux utilisateurs, Reddit est devenu le principal référentiel de connaissances communautaires et collaboratives, un fait qui en a certainement fait une cible principale pour les startups d’IA désespérées de données d’entraînement. Cette semaine, Reddit a annoncé qu’elle mettrait en place des mesures pour empêcher le scrap non autorisé par de telles organisations. Ces efforts comprendront une mise à jour du fichier robots.txt, un fichier présent sur la plupart des sites web qui fournit des directives aux robots d’indexation sur ce qu’ils peuvent et ne peuvent pas indexer, « dans les prochaines semaines ». Si vous êtes curieux, vous pouvez trouver le robots.txt actuel de Reddit ici. Il convient de noter que le robots.txt ne peut pas contraindre les scrapers à faire quoi que ce soit; le contenu du fichier est davantage des directives ou des demandes fermes. Les robots d’exploration peuvent être amenés à les ignorer, donc Reddit dit qu’il continuera de limiter les taux et/ou de bloquer les bots malveillants – vraisemblablement ceux qui ignorent robots.txt – pour accéder au site. En effet, les crawlers qui rejettent robots.txt risquent d’être bloqués totalement, si possible, sur les sites en général par leurs administrateurs. Ces mesures, aussi vagues soient-elles actuellement, semblent être spécifiquement ciblées sur ceux qui accèdent à Reddit dans un but lucratif. Le site dit que les « acteurs de bonne foi – comme les chercheurs et les organisations telles que l’Internet Archive – continueront à avoir accès au contenu de Reddit à des fins non commerciales ».

Share the Post:

« Désarmer l’IA » : l’encyclique historique du pape Léon XIV, ClickUp remplace 22 % de ses employés par 3 000 agents IA et la Gen Z se révolte contre l’intelligence artificielle

Le pape Léon XIV publie Magnifica humanitas, première encyclique dédiée à la dignité humaine face à l’IA. ClickUp licencie 22 % de son personnel et déploie 3 000 agents IA. La Gen Z américaine hue les discours pro-IA. Google prépare ses Googlebooks et la Chine donne une identité numérique aux robots. Décryptage par Netz Informatique.

En savoir plus

Le pape Léon XIV publie une encyclique sur l’IA, OpenAI résout un problème mathématique vieux de 80 ans et Google permet de créer des apps Android en quelques minutes

Ce 25 mai 2026, le pape Léon XIV publie Magnifica humanitas, première encyclique consacrée à la dignité humaine face à l’IA. OpenAI réalise une percée historique en mathématiques, et Google AI Studio permet désormais de créer des applications Android en langage naturel. Décryptage par Netz Informatique.

En savoir plus

Google interpelle la France sur l’IA, 9 jeunes sur 10 utilisent déjà un chatbot et SpaceX réussit le vol de Starship V3 : le point tech du 24 mai 2026

Un dirigeant de Google critique la France pour son retard sur l’IA, une étude CNIL révèle que 9 jeunes Français sur 10 utilisent une IA conversationnelle, SpaceX réussit le vol historique de Starship V3, et Washington débloque 9 milliards pour les puces IA. Décryptage par Netz Informatique, votre partenaire technologique à Haguenau.

En savoir plus