Animação facial em tempo real para personagens estilizados em 3D com dinâmica emocional
Author
Venue
ACM
Abstract
Nosso objetivo é melhorar a eficiência e a eficácia das técnicas de produção de animação. Apresentamos duas soluções em tempo real que controlam as expressões dos personagens de maneira geometricamente consistente e perceptualmente válida. Nossa primeira solução combina técnicas de animação por quadros-chave com modelos de aprendizado de máquina. Propomos uma rede de transferência de emoções 3D que utiliza uma imagem humana 2D para gerar um parâmetro de rig 3D estilizado. Nossa segunda solução combina técnicas de animação por captura de movimento baseadas em blendshapes com modelos de aprendizado de máquina. Propomos uma rede de adaptação de blendshapes que gera os movimentos dos parâmetros de rig dos personagens com consistência geométrica e estabilidade temporal. Demonstramos a eficácia do nosso sistema comparando-o com um produto comercial, o Faceware. Os resultados revelam que as avaliações de reconhecimento, intensidade e atratividade das expressões retratadas para personagens animados por meio de nossos sistemas são estatisticamente superiores às do Faceware. Nossos resultados podem ser implementados no pipeline de animação, auxiliando os animadores a criar expressões de forma mais rápida e precisa.
