Pourquoi j’ai laissé un chatbot IA s’entraîner sur mon livre

Il y a quatre ans, j’ai publié mon premier livre: La fin des temps: un bref guide de la fin du monde. Ce n’était pas si mal? J’ai eu droit à une entrevue avec le site que vous lisez en ce moment – merci, Dylan! – Et le livre m’a finalement aidé à obtenir le poste de rédacteur en chef de Future Perfect. J’ai eu une journée où je suis passé d’une émission de radio à l’autre, essayant d’expliquer en segments de cinq minutes aux animateurs de radio de Philadelphia à Phoenix pourquoi nous devrions tous nous inquiéter davantage du risque d’extinction de l’humanité et de ce que nous pouvons faire pour l’empêcher. Mais ce n’était pas un best-seller. Disons-le comme ceci: environ tous les six mois, je reçois une lettre de mon éditeur contenant un «relevé de redevance non payée», ce qui est un peu comme recevoir une carte de Noël de vos parents, sauf qu’au lieu d’argent, elle ne contient qu’une note vous disant combien ils ont dépensé pour vous élever. J’avoue donc que j’étais un peu fier quand j’ai reçu un email il y a quelques mois de la part de gens de aisafety.info, qui cherchent à créer un centre central pour expliquer les questions concernant la sécurité et l’alignement des IA à un public large. À cette fin, ils construisaient un grand modèle linguistique – avec le charmant nom de «Stampy» – qui pourrait agir en tant que chatbot, répondant aux questions que les gens pourraient se poser sur le sujet. (Le site vient d’être lancé en douceur, tandis que Stampy est toujours en phase de prototype.) Et ils me demandaient la permission d’utiliser mon livre La fin des temps, qui contient un long chapitre sur les risques existentiels liés aux IA, en tant que partie des données sur lesquelles Stampy serait formé. Ma première pensée, comme celle de tout auteur: quelqu’un a vraiment lu (ou au moins est au courant de l’existence de) mon livre! Mais ensuite, j’ai eu une seconde pensée: en tant qu’écrivain, qu’est-ce que cela signifie de permettre à un chatbot d’être formé sur votre propre travail? (Et gratuitement, en plus.) Contribuais-je à un projet qui pourrait aider les gens à mieux comprendre un sujet complexe et important comme la sécurité des IA? Ou bien étais-je en train de contribuer au processus de mon propre obsolescence?