CubePart: 개방형 어휘를 지원하는 부품 제어형 3D 생성기

게임 및 시뮬레이션에 사용되는 대화형 3D 자산은 일반적으로 애니메이션, 물리, 스크립트 기반 동작을 지원하기 위해 특정 의미론적 부분으로 분해되지만, 대부분의 생성형 3D 모델은 단일 메쉬나 애플리케이션별 요구 사항과 일치시킬 수 없는 임의의 부분 분해 결과만을 생성합니다. 본 논문에서는 부분 구조를 명시적인 추론 시 제어 신호로 노출하는, 개방형 어휘 기반의 부분 제어 가능 3D 메쉬 생성을 위한 생성적 프레임워크인 CubePart를 제시한다. 전역 텍스트 프롬프트와 부분 이름의 개방형 목록으로 표현된 사용자 정의 부분 스키마를 입력으로 받아, 본 방법은 지정된 의미 구조를 준수하면서 일관된 객체로 조립되는 메쉬 집합(스키마 요소당 하나씩)을 생성한다. 이러한 기능을 구현하기 위해, 우리는 대규모 개방형 어휘의 부품 라벨링된 3D 데이터셋을 구축하는 확장 가능한 데이터 파이프라인과, 전역 형상 합성과 부품 수준 디코딩을 분리하는 2단계 생성 아키텍처를 도입합니다. 우리는 생성된 자산이 수동 후처리 없이도 게임 엔진에 직접 통합되어 애니메이션 및 행동 스크립트에 의해 구동될 수 있음을 입증합니다. 프로젝트 페이지