La nouvelle technologie de mise à l’échelle d’Adobe utilise l’intelligence artificielle pour améliorer la netteté des vidéos.

La plupart des nouvelles fonctionnalités et expérimentations qu’Adobe a récemment annoncées impliquent l’intelligence artificielle, comme l’ajout et la suppression d’objets pour Premiere Pro et la génération d’images basées sur du texte dans Photoshop. Maintenant, la société a dévoilé VideoGigaGAN, une fonctionnalité expérimentale d’IA qui, selon elle, peut augmenter la résolution vidéo jusqu’à huit fois sans les artefacts habituels tels que le scintillement ou la distorsion, a rapporté The Verge. VideoGigaGAN bat les autres méthodes de Super Résolution Vidéo (SRV) car elle évite les artefacts et le scintillement habituels introduits par les réseaux antagonistes généraux (RAG), selon Adobe. En même temps, elle ajoute de la netteté et des détails – là où la plupart des autres systèmes échouent dans ces deux domaines à la fois. Bien sûr, le système crée des détails qui n’existent pas de toutes pièces, donc cela ne conviendrait pas pour des tâches comme l’amélioration vidéo à des fins de police, à la manière des émissions de crime style CSI. Mais les détails ajoutés paraissent impressionnément réels, comme des textures de peau, de fins poils, des détails de plumes de cygne et plus encore. Le modèle s’appuie sur un agrandisseur d’images à grande échelle appelé GigaGAN, selon les chercheurs d’Adobe. Les modèles précédents de SRV ont eu du mal à générer des détails riches dans les résultats, donc Adobe a combiné « l’attention temporelle » (pour réduire les artefacts qui s’accumulent avec le temps), la propagation de fonctionnalités (ajout de détails là où il n’en existe pas), l’antialiasing et quelque chose appelé « navette HF » (transportant des caractéristiques de haute fréquence) pour créer le résultat final. Si ces fonctionnalités étaient ajoutées à des produits comme Premiere Pro ou After Effects, elles pourraient permettre aux réalisateurs de vidéos d’améliorer nettement des prises de vue de basse résolution, bien qu’utiliser l’IA pour améliorer des personnes soit une pratique controversée. On ne sait pas encore si Adobe prévoit de le faire (pour l’instant, les clips sont courts et ne jouent qu’à 12 images par seconde), mais de nombreuses entreprises, y compris NVIDIA, Microsoft, Blackmagic Design et d’autres, travaillent également sur la technologie d’augmentation de résolution par IA.

Share the Post: