Cloudflare dévoile la destruction en un clic de l’IA de web scraping.

Cloudflare a offert mercredi aux clients d’hébergement web un moyen de bloquer les robots AI qui extraient le contenu des sites web et utilisent les données sans autorisation pour entraîner des modèles d’apprentissage automatique. Il l’a fait en se basant sur le mépris des clients envers les robots AI et a déclaré, « pour aider à préserver un Internet sûr pour les créateurs de contenu ». « Nous entendons clairement que les clients ne veulent pas que les robots AI visitent leurs sites web, surtout ceux qui le font de manière malhonnête. Pour aider, nous avons ajouté un tout nouveau bouton pour bloquer tous les robots AI en un clic. » Il existe déjà une méthode assez efficace pour bloquer les robots largement disponible pour les propriétaires de sites web, le fichier robots.txt. Lorsqu’il est placé dans le répertoire racine d’un site web, les robots d’exploration web automatisés sont censés le remarquer et se conformer aux directives du fichier leur indiquant de rester à distance. Compte tenu de la croyance largement répandue selon laquelle l’IA générative est basée sur le vol, et des nombreuses poursuites en justice visant à tenir les entreprises d’IA responsables, les sociétés qui trafiquent du contenu blanchi ont gracieusement permis aux éditeurs web de se désengager du pillage.