Jan Leike d’OpenAI s’efforce de veiller à ce que l’IA surpuissante reste de notre côté.

OpenAI, le créateur de ChatGPT, croit qu’il est sur le point de transformer notre monde avec des systèmes d’IA puissants. Au minimum, il pense que cela va changer fondamentalement notre façon de travailler et de vivre. Au maximum, cela pourrait rendre notre monde méconnaissable du jour au lendemain. Pour que cela se passe bien, au lieu d’un échec catastrophique, OpenAI a créé ce qu’il appelle l’équipe de superalignement, qui tente de comprendre comment faire en sorte que l’IA surhumaine fasse ce que nous voulons, au lieu de faire ce qu’elle veut. Le responsable de l’équipe est Jan Leike, un chercheur en apprentissage automatique qui a travaillé chez DeepMind de Google avant de rejoindre OpenAI. Son équipe est dans une course contre la montre : l’objectif est de trouver comment aligner les systèmes d’IA puissants avant que des systèmes d’IA puissants non alignés soient développés. (Un système d’IA est « aligné » s’il essaie de faire ce que les humains veulent, et « non aligné » s’il essaie de faire d’autres choses en dehors de notre contrôle. Une grande question sans réponse est de savoir dans quelle mesure nous pouvons savoir ce que nos systèmes d’IA essaient de faire.) « Je pense que l’alignement est réalisable », a déclaré Leike à Rob Wiblin dans le podcast 80,000 Hours en août. « Je pense que nous pouvons réellement faire beaucoup de progrès si nous nous y concentrons et y mettons des efforts. … Honnêtement, ça donne vraiment l’impression que nous avons une véritable approche du problème sur laquelle nous pouvons réellement itérer, vers laquelle nous pouvons réellement construire. Et je pense que cela a de fortes chances de fonctionner, en fait. Et c’est vraiment incroyable, et c’est vraiment excitant. C’est comme si nous avions ce problème difficile dont nous parlons depuis des années et des années, et maintenant nous avons une véritable chance de le résoudre. »