La Chine cesse de s’inquiéter du manque de GPU et apprend à aimer les supercalculateurs.

Des chercheurs chinois en informatique de premier plan ont suggéré que le pays peut construire de grands modèles linguistiques sans utiliser de GPU importés, en utilisant plutôt des supercalculateurs. Cette croyance a été exprimée lors du séminaire d’experts en développement de la puissance informatique en Chine de 2024 – une conférence co-organisée par une alliance industrielle chinoise et un organisme de normalisation national – et diffusée dans les médias parrainés par l’État dimanche. Zhang Yunquan, chercheur à l’Institut de technologie informatique de l’Académie chinoise des sciences, aurait déploré que les États-Unis aient pris des mesures pour « étouffer » le développement de l’IA en Chine, « notamment en interdisant la vente de GPU haut de gamme, en mettant fin au partage de code source pour les grands modèles et en interrompant la coopération écologique. » « Lorsque de grands modèles nécessitent entre 10 000 et 100 000 GPU, il est essentiel de surmonter des défis techniques tels que la consommation énergétique élevée, les problèmes de fiabilité et les limites de traitement parallèle en développant des supercalculateurs spécialisés », a-t-il conclu. Zhang a suggéré que la voie pour que la Chine reste au même niveau que le développement mondial de l’IA et « rompre le goulot d’étranglement de la puissance de calcul des grands modèles à court terme » consiste à utiliser ses deux décennies d’expérience dans le développement de technologies de supercalcul avancées et à créer des machines pour traiter de grands modèles. Il semble que les supercalculateurs chinois aient utilisé des puces conçues localement.