« Meta entraîne déjà un successeur plus puissant pour Llama 3 »

Le jeudi matin, Meta a publié son dernier modèle d’intelligence artificielle, Llama 3, le présentant comme le plus puissant à être rendu open source pour que tout le monde puisse l’utiliser. L’après-midi même, Yann LeCun, le scientifique en chef en IA de Meta, a déclaré qu’un successeur encore plus puissant de Llama est en préparation. Il a suggéré qu’il pourrait potentiellement surpasser les meilleurs modèles d’IA fermés du monde, y compris le GPT-4 d’OpenAI et le Gemini de Google. Meta a publié deux versions de Llama 3 aujourd’hui, l’une avec 8 milliards de paramètres – un terme de l’industrie qui transmet approximativement la puissance d’un modèle – et une autre avec 70 milliards de paramètres. LeCun a affirmé que des modèles plus grands sont en préparation et que le plus puissant, avec plus de 400 milliards de paramètres, est actuellement en entraînement. « Cela prend beaucoup de temps pour peaufiner, mais plusieurs variations de ces modèles vont sortir dans les prochains mois », a déclaré LeCun à Imagination in Action, une conférence au MIT axée sur l’IA générative. Il est difficile de dire quand le modèle avec plus de 400 milliards de paramètres pourrait être publié. Meta a lancé mardi une nouvelle assistante appelée Meta IA basée sur Llama 3 et affirme que ses tests montrent que les modèles sont meilleurs que les modèles open source précédents avec des nombres similaires de paramètres. Bien que la plupart des plus grands développeurs d’IA comme Google et OpenAI gardent leur technologie fermée, LeCun a prédit que les modèles d’IA open source progresseront plus rapidement. En théorie, a-t-il dit, ils pousseront l’IA vers une intelligence de niveau humain plus rapidement. LeCun a soutenu que l’examen de l’industrie logicielle montre que la technologie open source finit par l’emporter. L’approche ouverte est devenue prédominante dans l’infrastructure logicielle, a-t-il dit, car elle permet des améliorations à être partagées plus rapidement et que le code soit examiné de manière plus complète. « L’IA est meilleure lorsque plus de personnes regardent le code », a-t-il dit. « L’infrastructure doit être open source – elle progresse simplement plus vite. » La stratégie d’IA open source de Meta a contribué à accélérer l’engouement actuel autour de l’IA générative. Lorsque l’entreprise a publié son modèle Llama 2 en juillet 2023, elle a donné accès à de nombreux startups, chercheurs et entrepreneurs à des modèles d’IA beaucoup plus puissants à télécharger pour expérimenter et développer.

Share the Post: