Nvidia rend open source Audio2Face
Nvidia fait un pas en avant en rendant open source son outil Audio2Face, une technologie propulsée par l’IA qui génère des animations faciales réalistes pour des avatars 3D à partir de simples entrées audio.
Cette décision signifie que les développeurs ont désormais la possibilité d’exploiter cet outil et le cadre sous-jacent pour concevoir des personnages 3D réalistes destinés à leurs jeux et applications.
Comment fonctionne Audio2Face?
L’application Audio2Face de Nvidia analyse les « caractéristiques acoustiques » d’une voix afin de produire des données d’animation qu’elle applique aux expressions faciales et aux mouvements des lèvres d’un avatar 3D.
Cette fonctionnalité permet aux développeurs de créer des personnages 3D qui peuvent être utilisés dans du contenu pré-écrit ainsi que dans des retransmissions en direct.
Utilisation dans l’industrie du jeu
Certains développeurs ont déjà commencé à intégrer Audio2Face dans leurs jeux. C’est notamment le cas de l’éditeur de Chernobylite 2: Exclusion Zone, Farm51, et des développeurs de Alien: Rogue Incursion Evolved Edition.
Nouveaux horizons grâce à l’open source
En rendant open source les modèles et les kits de développement logiciel d’Audio2Face, Nvidia permet aux utilisateurs d’accéder également au cadre d’entraînement de cet outil. Cela offre la possibilité d’adapter les modèles à des cas d’utilisation spécifiques, élargissant ainsi les fonctionnalités et les applications possibles.
“La possibilité de modifier les modèles pour divers cas d’utilisation élargit considérablement le champ des fonctionnalités et applications possibles.”
