Audio2Face open-source

Audio2Face da Nvidia Agora é de Código Aberto: Avatares 3D Realistas para Todos

IA

A Nvidia acaba de lançar uma atualização bem grande: eles estão tornando open-source sua ferramenta Audio2Face. O que isso significa para você? Bem, se você curte avatares 3D e animações faciais realistas, isso é definitivamente algo para se animar. Basicamente, o Audio2Face usa IA para criar animações faciais para personagens 3D com base apenas na entrada de áudio. Imagine, o rosto do seu avatar espelhando as emoções e os movimentos labiais de alguém falando em tempo real – bem legal, né?

O que é realmente interessante é que isso não é apenas para conteúdo pré-fabricado. A Nvidia diz que você também pode usá-lo para transmissões ao vivo. Já consigo imaginar algumas aplicações bem interessantes para isso, especialmente no mundo da realidade virtual e experiências de metaverso.

A Farm51, o pessoal por trás de Chernobylite 2, e os desenvolvedores que trabalham em Alien: Rogue Incursion Evolved Edition já estão brincando com ele. É um testamento do potencial que esses desenvolvedores de jogos estão usando isso, não é?

Agora, a melhor parte. Como a Nvidia está tornando o software de código aberto, você pode ajustá-lo ao seu gosto. Se você quiser treinar seus próprios modelos, sinta-se à vontade para fazê-lo, o framework está disponível.

Fonte: The Verge