CubePart: Ein 3D-Generator mit offenem Vokabular und steuerbaren Teilen

Interaktive 3D-Assets, die in Spielen und Simulationen verwendet werden, werden typischerweise in spezifische semantische Teile zerlegt, um Animation, Physik und skriptgesteuerte Verhaltensweisen zu unterstützen. Die meisten generativen 3D-Modelle erzeugen jedoch entweder monolithische Meshes oder willkürliche Teilzerlegungen, die nicht an anwendungsspezifische Anforderungen angepasst werden können. Wir stellen CubePart vor, ein generatives Framework für die Erzeugung von 3D-Meshes mit offenem Vokabular und steuerbaren Teilen, das die Teilstruktur als explizites Steuersignal zur Laufzeit bereitstellt. Ausgehend von einer globalen Textvorlage und einem benutzerdefinierten Teileschema, das als offene Liste von Teilnamen ausgedrückt wird, generiert unsere Methode eine Reihe von Meshes – eines pro Schemaelement –, die sich zu einem kohärenten Objekt zusammenfügen und dabei die angegebene semantische Struktur berücksichtigen. Um diese Fähigkeit zu ermöglichen, führen wir eine skalierbare Datenpipeline ein, um einen großen, offenes Vokabular aufweisenden, mit Teilen beschrifteten 3D-Datensatz zu erstellen, zusammen mit einer zweistufigen generativen Architektur, die die globale Formsynthese von der Dekodierung auf Teilebene trennt. Wir zeigen, dass die resultierenden Assets direkt in Spiel-Engines integriert und durch Animations- und Verhaltensskripte gesteuert werden können, ohne dass eine manuelle Nachbearbeitung erforderlich ist. Projektseite