تمت ترجمة المحتوى الموجود على هذا الموقع باستخدام الذكاء الاصطناعي (AI) أو تقنية الترجمة الآلية، وقد تحتوي على أخطاء.

Skip to content
Speech & Audio
3D

الدمى المتحركة ذات الصوت العاطفي

View Publication

Author

يي بان، رويسي زانغ، شينغران تشينغ، شواي تان، يو دينغ، كيني ميتشل، شوبو يانغ

Venue

IEEE VR 2023/TVCG

Abstract

تقدم هذه الورقة البحثية "الدمى الصوتية العاطفية"، وهي نهج للرسوم المتحركة للوجه يعتمد على الصوت لتصوير الشخصيات بتغيرات عاطفية حية. يتم التحكم في حركة الشفاه ومناطق الوجه المحيطة بها من خلال محتوى الصوت، ويتم تحديد ديناميكيات الوجه حسب فئة العاطفة وشدتها. نهجنا فريد من نوعه لأنه يأخذ في الاعتبار الصحة الإدراكية والهندسة بدلاً من العمليات الهندسية البحتة. ومن الميزات البارزة الأخرى لنهجنا قابليته للتعميم على شخصيات متعددة. أظهرت النتائج أن تدريب الشخصيات الثانوية الجديدة عندما يتم تصنيف معلمات الهيكل إلى العين والحاجبين والأنف والفم والتجاعيد المميزة أمر مهم في تحقيق نتائج تعميم أفضل مقارنة بالتدريب المشترك. تثبت دراسات المستخدمين فعالية نهجنا من الناحيتين النوعية والكمية. يمكن تطبيق نهجنا في AR/VR و 3DUI، أي الأفاتار/الأفاتار الذاتية للواقع الافتراضي، والمؤتمرات عن بُعد، والحوار داخل الألعاب.