Pourquoi j’ai laissé un chatbot IA s’entraîner sur mon livre

Il y a quatre ans, j’ai publié mon premier livre: Fin des temps: Un bref guide de la fin du monde. Ca allait … bien? J’ai eu droit à une entrevue avec le site que vous lisez maintenant – merci, Dylan! – et le livre m’a finalement aidé à obtenir le poste de directeur de Future Perfect. J’ai eu une journée où je suis passé d’une émission de radio à l’autre, essayant d’expliquer en segments de cinq minutes aux animateurs de radio de Philadelphie à Phoenix pourquoi nous devrions tous nous inquiéter davantage du risque de l’extinction de l’humanité et ce que nous pouvions faire pour l’empêcher. Mais ce n’était pas un best-seller. Mettons les choses de cette façon – environ tous les six mois, je reçois une lettre de mon éditeur contenant un « relevé de redevances impayées », qui est un peu comme recevoir une carte de Noël de vos parents, sauf qu’au lieu de l’argent, elle ne contient qu’une note vous expliquant combien ils ont dépensé pour vous élever. Alors j’avoue que j’étais un peu fier quand j’ai reçu un email il y a quelques mois de la part de gens de aisafety.info, qui visent à créer un point central pour expliquer les questions concernant la sécurité et l’alignement de l’IA à un public large. À cette fin, ils construisaient un grand modèle linguistique – avec le merveilleux nom de « Stampy » – qui pouvait agir en tant que chatbot, répondant aux questions que les gens pourraient se poser sur le sujet. (Le site vient d’être lancé en douceur, tandis que Stampy est toujours en phase de prototype.) Et ils me demandaient la permission d’utiliser mon livre Fin des temps, qui contient un long chapitre sur les risques existentiels de l’IA, comme partie des données sur lesquelles Stampy serait formé. Ma première pensée, comme celle de tout auteur: quelqu’un a vraiment lu (ou au moins est au courant de l’existence de) mon livre! Mais ensuite j’ai eu une seconde pensée: en tant qu’écrivain, qu’est-ce que cela signifie de permettre à un chatbot d’être formé sur votre propre travail? (Et gratuitement, en plus.) Contribuais-je à un projet qui pourrait aider les gens à mieux comprendre un sujet complexe et important comme la sécurité de l’IA? Ou bien accélérais-je simplement le processus de mon propre obsolescence?