Il y a quatre ans, j’ai publié mon premier livre: La fin des temps: un bref guide de la fin du monde. Ce n’était pas si mal? J’ai eu droit à une entrevue avec le site que vous lisez en ce moment – merci, Dylan! – Et le livre m’a finalement aidé à obtenir le travail de gestionnaire de Future Perfect. J’ai passé une journée entière à passer d’une radio à l’autre, essayant d’expliquer en segments de cinq minutes aux animateurs de radio de Philadelphie à Phoenix pourquoi nous devrions tous nous inquiéter davantage du risque d’extinction de l’humanité et ce que nous pouvons faire pour l’empêcher. Mais ce n’était pas un best-seller. Disons-le simplement: environ tous les six mois, je reçois une lettre de mon éditeur contenant un « état de royalties non payé », ce qui est un peu comme recevoir une carte de Noël de vos parents, sauf qu’au lieu de l’argent, il y a juste une note vous disant combien ils ont dépensé pour vous élever. J’avoue donc que j’étais un peu content quand j’ai reçu un email il y a quelques mois de la part de gens de aisafety.info, qui cherchent à créer un centre central pour expliquer les questions liées à la sécurité des IA et à l’alignement des IA – comment rendre les IA responsables des objectifs des humains – à un public large. A cette fin, ils construisaient un grand modèle de langage – avec le charmant nom de « Stampy » – qui pouvait agir en tant que chatbot, répondant aux questions que les gens pourraient se poser sur le sujet. (Le site vient d’être lancé, tandis que Stampy est toujours en phase de prototype.) Et ils demandaient la permission d’utiliser mon livre La fin des temps, qui contient un long chapitre sur les risques existentiels liés aux IA, comme partie des données sur lesquelles Stampy serait formé. Ma première pensée, comme celle de tout auteur: quelqu’un a vraiment lu (ou au moins est conscient de l’existence de) mon livre! Mais ensuite j’ai eu une deuxième pensée: en tant qu’écrivain, qu’est-ce que cela signifie de permettre à un chatbot d’être formé sur votre propre travail? (Et gratuitement, en plus.) Contribuais-je à un projet qui pourrait aider les gens à mieux comprendre un sujet complexe et important comme la sécurité des IA? Ou bien accélérais-je simplement le processus de mon propre obsolescence?
« Les livres de Penguin Random House disent maintenant explicitement ‘non’ à la formation IA »
‘Écrit par Emma Roth, dont le portfolio couvre aussi bien les percées technologiques grand public, les dynamiques de l’industrie du