Новая технология Nvidia использует ИИ для автоматического подбора голосовых реплик к анимированным лицам

0
419

Наблюдайте, как эти лица произносят эти слова в реальном времени.

Nvidia может быть наиболее известна своими графическими картами, которые вы не найдете в магазинах, но компания также производит некоторые интересные программные инструменты. Примером этого является функция удаления шума, известная как RTX voice, которая была обновлена для работы со всеми картами GeForce в начале этого года и отлично справляется с очисткой фонового шума.

Теперь Nvidia (спасибо, 80.lv) продемонстрировала новый инструмент, который был запущен в бета-версии в этом году, связанный со звуком. Audio2Face — это впечатляющий процесс автомоделирования, который работает в рамках открытой платформы моделирования в реальном времени Omniverse от Nvidia. Он способен принимать аудиофайл и применять удивительно хорошо подобранные анимации к прилагаемой 3D-модели персонажа Digital Mark.

Он делает это автоматически, хорошо работает с большинством языков и может быть настроен с помощью ползунков для большей детализации