Par Emilia David, une reporter qui couvre l’IA. Avant de rejoindre The Verge, elle a couvert l’intersection entre la technologie, la finance et l’économie. AMD veut que les gens se souviennent que Nvidia n’est pas la seule entreprise à vendre des puces IA. Il a annoncé la disponibilité de nouveaux accélérateurs et processeurs axés sur l’exécution de grands modèles de langage, ou LLMs. Le fabricant de puces a présenté l’accélérateur Instinct MI300X et l’unité de traitement accéléré Instinct M1300A, qui, selon la société, sert à former et à exécuter des LLMs. La société a déclaré que le MI300X avait une capacité de mémoire 1,5 fois plus importante que la version précédente M1250X. Les deux nouveaux produits ont une meilleure capacité de mémoire et sont plus économes en énergie que leurs prédécesseurs, a déclaré AMD. «Les LLMs continuent à augmenter en taille et en complexité, nécessitant une énorme quantité de mémoire et de calcul», a déclaré Lisa Su, PDG d’AMD. Selon Su, le MI300X «est l’accélérateur le plus performant au monde». Elle a affirmé que le MI300X était comparable aux puces H100 de Nvidia en termes de formation de LLM, mais qu’il se comportait mieux du côté de l’inférence – 1,4 fois mieux que le H100 lorsqu’il travaillait avec Llama 2 de Meta, un LLM de 70 milliards de paramètres.
Menu
