Jan Leike d’OpenAI s’efforce de s’assurer que l’IA superintelligente reste de notre côté.

OpenAI, le créateur de ChatGPT, croit qu’il est sur le point de transformer notre monde avec de puissants systèmes d’IA. Au minimum, il pense que cela changera fondamentalement la façon dont nous travaillons et vivons. Au maximum, cela pourrait rendre notre monde méconnaissable overnight.Pour que cela se passe bien, au lieu de catastrophiquement mal, OpenAI a créé ce qu’il appelle l’équipe de superalignement, qui essaie de comprendre comment faire en sorte que l’IA surhumaine fasse ce que nous voulons, au lieu de faire sa propre chose. Le chef de l’équipe est Jan Leike, un chercheur en apprentissage machine qui a travaillé chez DeepMind de Google avant de rejoindre OpenAI. Son équipe est en course contre la montre: l’objectif est de comprendre comment aligner les puissants systèmes d’IA avant que des systèmes d’IA puissants et mal alignés ne soient développés. (Un système d’IA est «aligné» s’il essaie de faire ce que les humains veulent, et «mal aligné» s’il essaie de faire autre chose en dehors de notre contrôle. Une grande question en suspens est de savoir à quel point nous pouvons nous rendre compte de ce que nos systèmes d’IA essayent de faire.) «Je pense que l’alignement est abordable», a déclaré Leike à Rob Wiblin lors d’un podcast de 80 000 heures en août. «Je pense que nous pouvons réellement faire beaucoup de progrès si nous nous y concentrons et y mettons de l’effort. … Honnêtement, cela ressemble vraiment à ce que nous avons un vrai angle d’attaque sur le problème sur lequel nous pouvons réellement itérer, nous pouvons réellement progresser. Et je pense que c’est assez probable que cela fonctionne, en fait. Et c’est vraiment, vraiment sauvage, et c’est vraiment excitant. C’est comme si nous avions ce difficile problème que nous avons discuté pendant des années et des années, et maintenant nous avons une véritable chance de le résoudre. »