本網站內容使用人工智慧(AI)或機器翻譯技術翻譯,可能存在錯誤。

Skip to content

具備情緒動態的 3D 風格化角色即時臉部動畫

Author

葉潘(上海交通大學)、張瑞思(上海交通大學)、王靜瑩(上海交通大學)、丁宇(網易伏羲人工智慧實驗室)、肯尼·米切爾(Roblox、愛丁堡納皮爾大學)

Venue

ACM

Abstract

我們的目標是提升動畫製作技術的效率與成效。我們提出兩種即時解決方案,能以幾何上一致且感知上合理的方式驅動角色表情。第一種解決方案結合了關鍵幀動畫技術與機器學習模型。我們提出一種 3D 情緒轉移網路,利用 2D 人物影像來生成風格化的 3D 骨架參數。第二種解決方案則結合了基於混合形狀的動作捕捉動畫技術與機器學習模型。 我們提出了一種混合形狀適應網路,能以幾何一致性與時間穩定性生成角色骨架參數的動作。透過與商用產品 Faceware 進行比較,我們驗證了系統的有效性。結果顯示,透過我們的系統呈現的動畫角色表情在辨識度、強度及吸引力方面的評分,在統計上均高於 Faceware。這些成果可整合至動畫製作流程中,協助動畫師更快速且精準地創作表情。