Nvidia torna Open-Source ferramenta de IA para animação facial 3D realista
Então, a Nvidia está fazendo uma jogada bem legal que pode realmente agitar o mundo dos avatares 3D. Eles estão tornando open-source a tecnologia Audio2Face, que é basicamente um mago de IA que transforma palavras faladas em animações faciais super realistas. Tipo, que demais isso?
Pense nisso: em vez de animar minuciosamente cada pequeno movimento e sorriso, os desenvolvedores agora podem usar o Audio2Face para deixar a IA fazer o trabalho pesado. Ele analisa o áudio – as pequenas nuances e inflexões em uma voz – e então traduz isso em expressões plausíveis no rosto de um avatar 3D.
O que é especialmente interessante é que não é apenas para coisas pré-gravadas. A Nvidia diz que você pode usá-lo para livestreams também. Imagine as possibilidades para influenciadores virtuais, personagens de videogame realistas ou até mesmo para tornar suas chamadas do Zoom um pouco mais envolventes. Alguns desenvolvedores já estão brincando com o Audio2Face, como o pessoal por trás de "Chernobylite 2: Exclusion Zone" e "Alien: Rogue Incursion Evolved Edition".
A Nvidia não está apenas entregando o produto final. Eles também estão tornando open-source o framework de treinamento, o que significa que os desenvolvedores podem entrar debaixo do capô e personalizar os modelos de IA para suas necessidades específicas. Quer criar avatares que reajam de forma diferente a certas emoções? Agora você pode ajustar a IA para fazer exatamente isso. Parece que isso abre uma grande porta para a inovação. Estou animado para ver o que as pessoas vão inventar!
Fonte: The Verge