Veja abaixo os vídeos sobre o Audio2Emotion e o Avatar Cloud Engine apresentados pela Nvidia na Siggraph 2022.

O Audio2Emotion é uma adição ao sistema Audio2Face que já divulgamos aqui, ambos estão disponíveis de graça para artistas individuais, assim como o Omniverse, mas exige RTX.

O Audio2Face anima rostos usando apenas um arquivo de áudio, mas a inteligência artificial do Audio2Emotion consegue identificar a emoção na voz do ator e reproduzir na animação das expressões faciais em 3D.

O programa aceita áudios gravados e ao vivo, também exporta as expressões faciais como Blend Shapes (Morph Targets) no formato USD para usar em outros Softs 3D.

Porém, estes sistemas são apenas partes do que a Nvidia está chamando de Avatar Cloud Engine (ACE), que pretende oferecer todo tipo de ferramenta baseada em AI para criar personagens interativos Real-Time, usados em atendimentos automatizados, interação amigável com máquinas e sistemas autônomos.

Eu aviso há pelo menos 5 anos que a animação de personagens iria acabar e praticamente já acabou, começando pelos bípedes, inclusive com animação facial, mas logo se extenderá para quadrúpedes e outros animais.

Você pode ter mais informações sobre o Audio2Face e Audio2Emotion clicando aqui.

Para acessar os recursos, clique aqui.