แอนิเมชันใบหน้าแบบเรียลไทม์สำหรับตัวละคร 3 มิติสไตล์การ์ตูนพร้อมการแสดงอารมณ์แบบไดนามิก
Author
Venue
เอซีเอ็ม
Abstract
เป้าหมายของเราคือการปรับปรุงประสิทธิภาพและประสิทธิผลของเทคนิคการผลิตแอนิเมชัน เราขอนำเสนอสองวิธีแก้ปัญหาแบบเรียลไทม์ที่ขับเคลื่อนการแสดงออกของตัวละครในลักษณะที่สอดคล้องทางเรขาคณิตและมีความถูกต้องทางประสาทสัมผัส วิธีแรกของเราผสมผสานเทคนิคแอนิเมชันแบบคีย์เฟรมกับโมเดลการเรียนรู้ของเครื่อง เราเสนอเครือข่ายการถ่ายโอนอารมณ์แบบ 3 มิติที่ใช้ภาพมนุษย์แบบ 2 มิติเพื่อสร้างพารามิเตอร์ของโครงร่าง 3 มิติที่มีสไตล์ วิธีที่สองของเราผสมผสานเทคนิคแอนิเมชันการจับการเคลื่อนไหวที่ใช้เบลนด์เชฟกับโมเดลการเรียนรู้ของเครื่อง เราเสนอเครือข่ายการปรับแต่งรูปร่างแบบผสม (blendshape adaptation network) ซึ่งสร้างการเคลื่อนไหวของพารามิเตอร์ของตัวละคร (character rig) ด้วยความสอดคล้องทางเรขาคณิตและความเสถียรทางเวลา เราสาธิตประสิทธิภาพของระบบของเราโดยการเปรียบเทียบกับผลิตภัณฑ์เชิงพาณิชย์ Faceware ผลการทดลองแสดงให้เห็นว่าคะแนนการรับรู้ ความเข้มข้น และความน่าดึงดูดของสีหน้าที่แสดงสำหรับตัวละครแอนิเมชันผ่านระบบของเราสูงกว่า Faceware อย่างมีนัยสำคัญทางสถิติ ผลการทดลองของเราสามารถนำไปใช้ในกระบวนการสร้างแอนิเมชัน (animation pipeline) ได้ ซึ่งช่วยให้ผู้สร้างแอนิเมชันสามารถสร้างสีหน้าได้รวดเร็วและแม่นยำมากขึ้น
