NVIDIA rend l’outil « Audio2Face » open source
, par Quentin
NVIDIA a publié son outil Audio2Face sous licence MIT. Cette technologie génère en temps réel des animations faciales et du lip sync à partir d’un simple flux audio, avec déjà des intégrations dans Maya et Unreal Engine 5.
Le SDK et les modèles pré-entraînés sont disponibles, permettant aux studios d’adapter la solution à leurs besoins. Des développeurs comme The Farm 51, Codemasters ou GSC Game World l’utilisent déjà pour accélérer leurs pipelines d’animation.
Source : developer.nvidia.com