Les éditeurs en ligne font face à un dilemme : autoriser le scraping par l’IA de Google ou perdre en visibilité sur les moteurs de recherche.

Alors que le gouvernement américain examine ses options suite à une décision historique qualifiant Google de « monopoliste » la semaine dernière, les publications en ligne font face à un avenir de plus en plus sombre. Et cette fois, ce n’est pas seulement en raison d’une diminution importante des revenus publicitaires. Bloomberg rapporte que leur choix se résume désormais à permettre à Google d’utiliser leur contenu publié pour produire des « réponses » de recherche générées par l’IA ou de perdre en visibilité dans le moteur de recherche de l’entreprise. Le cœur du problème réside dans le Googlebot, le robot d’indexation qui parcourt et indexe le web en direct pour produire les résultats que vous voyez lorsque vous saisissez des termes de recherche. Si les éditeurs bloquent Google pour l’utilisation de leur contenu dans les réponses générées par l’IA que vous voyez maintenant en tête de nombreux résultats de recherche, ils perdent également le privilège d’inclure leurs pages web dans les résultats web standard. Ce dilemme a poussé les publications, les moteurs de recherche concurrents et les startups d’IA à placer leurs espoirs dans le ministère de la Justice. Le New York Times a rapporté mardi que le DOJ envisage de demander à un juge fédéral de scinder des parties de l’entreprise (filiales telles que Chrome ou Android). D’autres options envisagées incluent de forcer Google à partager des données de recherche avec ses concurrents ou à renoncer à ses accords de moteurs de recherche par défaut, comme le contrat de 18 milliards de dollars signé avec Apple. Google utilise un robot d’indexation distinct pour son chatbot Gemini (anciennement Bard). Mais son principal robot d’indexation couvre à la fois les Aperçus d’IA et les recherches standard, laissant les éditeurs web avec peu (voire aucun) levier. Si vous laissez Google racler votre contenu pour des réponses AI Overview, les lecteurs peuvent considérer que c’est la fin de l’affaire sans se donner la peine de visiter votre site (ce qui signifie aucun revenu de ces lecteurs potentiels). Mais si vous bloquez le Googlebot, vous perdez en visibilité sur les moteurs de recherche, ce qui entraîne très probablement des revenus à court terme considérablement moindres et une perte colossale de position concurrentielle à long terme. Le PDG d’iFixit, Kyle Wiens, a déclaré à Bloomberg : « Je peux bloquer ClaudeBot (le robot d’Anthropic pour son chatbot Claude) pour qu’il n’indexe pas notre site sans nuire à notre entreprise. Mais si je bloque le Googlebot, nous perdons du trafic et des clients. »