Jan Leike de OpenAI s’efforce de s’assurer que l’IA superintelligente reste de notre côté.

OpenAI, le créateur de ChatGPT, croit qu’il est sur le point de transformer notre monde avec de puissants systèmes d’IA. Au minimum, il pense que cela va profondément changer la façon dont nous travaillons et vivons. Au maximum, cela pourrait rendre notre monde méconnaissable du jour au lendemain. Pour que cela se passe bien, au lieu de se passer catastrophiquement mal, OpenAI a créé ce qu’elle appelle l’équipe de superalignement, qui essaie de comprendre comment faire fonctionner une IA surhumaine de la manière dont nous le voulons, au lieu de fonctionner de manière indépendante. Le responsable de l’équipe est Jan Leike, un chercheur en apprentissage machine qui a travaillé chez Google DeepMind avant de rejoindre OpenAI. Son équipe est en course contre la montre : l’objectif est de comprendre comment aligner les puissants systèmes d’IA avant que les puissants systèmes d’IA non alignés ne soient développés. (Un système d’IA est «aligné» s’il essaie de faire ce que les humains veulent, et «non aligné» s’il essaie de faire autre chose en dehors de notre contrôle. Une grande question en suspens est de savoir à quel point nous pouvons comprendre ce que nos systèmes d’IA essaient de faire.) «Je pense que l’alignement est abordable», a déclaré Leike à Rob Wiblin lors d’un podcast de 80 000 heures en août. «Je pense que nous pouvons réellement faire beaucoup de progrès si nous nous concentrons dessus et y mettons de l’effort. … Honnêtement, cela ressemble vraiment à un vrai angle d’attaque sur le problème sur lequel nous pouvons itérer, nous pouvons nous construire. Et je pense que c’est assez probable que cela fonctionne, en fait. Et c’est vraiment sauvage, et c’est vraiment excitant. C’est comme si nous avions ce problème difficile dont nous parlons depuis des années et des années, et maintenant nous avons une vraie chance de le résoudre. »