Pourquoi j’ai laissé un chatbot IA s’entraîner sur mon livre

Il y a quatre ans, j’ai publié mon premier livre: « End Times: A Brief Guide to the End of the World ». Il a plutôt bien marché? J’ai eu droit à une entrevue sur le site que vous lisez en ce moment – merci, Dylan! – et le livre m’a finalement aidé à décrocher le poste de responsable de Future Perfect. J’ai passé une journée à enchaîner les passages radio, essayant d’expliquer en cinq minutes aux animateurs de matinale de Philadelphie à Phoenix pourquoi nous devrions tous nous inquiéter davantage du risque d’extinction de l’humanité et de ce que nous pouvions faire pour l’empêcher. Mais ce n’est pas un best-seller. Disons les choses ainsi – environ tous les six mois, je reçois une lettre de mon éditeur contenant un « état de royalties non payé », ce qui ressemble un peu à recevoir une carte de voeux de la part de vos parents, sauf qu’au lieu d’argent, elle ne contient qu’une note vous indiquant combien ils ont dépensé pour vous élever. J’avoue donc que j’étais un peu ravi quand j’ai reçu un e-mail il y a quelques mois de la part de gens de aisafety.info, qui ont pour objectif de créer un hub central pour expliquer les questions relatives à la sécurité des IA et à l’alignement des IA – comment rendre les IA responsables des objectifs humains – à un large public. À cette fin, ils ont entraîné un large modèle linguistique – avec le charmant nom de « Stampy » – qui pouvait agir en tant que chatbot, répondant aux questions que les gens pourraient se poser sur le sujet. (Le site vient d’être lancé en douceur, tandis que Stampy est toujours en phase de prototype.) Et ils m’ont demandé la permission d’utiliser mon livre End Times, qui contient un long chapitre sur les risques existentiels liés aux IA, comme partie des données sur lesquelles Stampy serait formé. Ma première pensée, comme celle de tout auteur: quelqu’un a vraiment lu (ou au moins est conscient de l’existence de) mon livre! Mais ensuite j’ai eu une deuxième pensée: en tant qu’écrivain, qu’est-ce que cela signifie de permettre à un chatbot d’être formé sur votre propre travail? (Et gratuitement, en plus.) Contribuais-je à un projet qui pourrait aider les gens à mieux comprendre un sujet complexe et important comme la sécurité des IA? Ou bien accélérais-je simplement le processus de mon propre obsolescence?