Act-One donne vie à l’animation en utilisant les performances vidéo et vocales pour générer des animations captivantes. Cette technologie signifie une avancée remarquable dans la modélisation générative pour le contenu dynamique en direct et animé. Typiquement, la création d’une animation faciale implique une série de processus complexes, tels que l’utilisation d’équipements de capture de mouvement, la référence à plusieurs séquences, et le gréage manuel des visages, pour transformer la représentation d’un acteur en un modèle 3D utilisable en animation. Cette méthode conventionnelle pose un défi fondamental : capturer et maintenir les nuances et les émotions du métrage original sur le personnage numérisé.
Notre stratégie adopte un pipeline totalement distinctif, alimenté uniquement par la performance de l’acteur sans l’utilisation d’aucun équipement supplémentaire. Cette approche innovante permet l’application d’Act-One à un large éventail d’images de référence. Notamment, le modèle conserve les expressions faciales réalistes intactes et convertit avec précision les performances en personnages aux proportions différentes de celles de la source vidéo originale.
Ce niveau de flexibilité ouvre la voie à la conception et à l’animation de personnages imaginatifs. Tout aussi important, le modèle produit des sorties authentiques et cinématographiques, démontrant une robustesse remarquable à travers divers angles de caméra tout en conservant des animations de visage en haute résolution. Cette fonctionnalité accorde aux créateurs la liberté de créer des personnages crédibles qui peuvent véritablement exprimer des émotions et renforcer l’engagement des spectateurs avec le contenu.
