Títeres de voz emocional
Author
Venue
IEEE VR 2023/TVCG
Abstract
El artículo presenta el «emotional voice puppetry», un enfoque de animación facial basado en el audio para representar personajes con cambios emocionales vívidos. El movimiento de los labios y las zonas faciales circundantes se controlan mediante el contenido del audio, y la dinámica facial se establece según la categoría de la emoción y su intensidad. Nuestro enfoque es exclusivo porque tiene en cuenta la validez perceptiva y la geometría, en lugar de procesos puramente geométricos. Otro aspecto destacado de nuestro enfoque es su capacidad de generalización a múltiples personajes. Los resultados mostraron que el entrenamiento de nuevos personajes secundarios cuando los parámetros del rig se clasifican en ojos, cejas, nariz, boca y arrugas características es significativo para lograr mejores resultados de generalización en comparación con el entrenamiento conjunto. Los estudios con usuarios demuestran la eficacia de nuestro enfoque tanto cualitativa como cuantitativamente. Nuestro enfoque puede aplicarse en RA/RV y 3DUI, concretamente en avatares de realidad virtual/autoavatares, teleconferencias y diálogos en videojuegos.
