Nvidia открыла исходный код Audio2Face — своей технологии, которая позволяет создавать реалистичную анимацию лиц 3D-аватаров на основе аудио. Это означает, что теперь разработчики могут использовать этот инструмент и его базовую платформу для создания живых и правдоподобных 3D-персонажей для игр и приложений.
Технология Audio2Face анализирует акустические характеристики голоса, чтобы генерировать данные анимации, которые передают мимику и движения губ 3D-аватара. Такой подход подходит как для заранее записанного контента, так и для прямых трансляций.
Некоторые разработчики уже применяют Audio2Face в своих проектах, например, создатели игры Chernobylite 2: E Zone и Alien: Rogue Incursion Evolved Edition.
Кроме того, Nvidia публикует не только модели и программные комплекты для разработки, но и обучающие фреймворки, что позволит пользователям адаптировать технологии под разные задачи и сценарии использования.
