I. Zusammenfassung
Hunyuan3D-Part ist eine Open-Source-Lösung von Tencent Hunyuan zur 3D-Formgenerierung und -zerlegung auf Komponentenebene. Sie besteht aus P3-SAM (native 3D-Teilesegmentierung) und X-Part (steuerbare Teilegenerierung). Das Training basiert nicht auf 2D-SAM. Basierend auf rund 3,7 Millionen Formen und sauberen Teileannotationen ermöglicht sie automatisierte 3D-Segmentierung und diffuse Teilegenerierung. Das Dokument berichtet von hochmodernen Ergebnissen in mehreren Benchmarks. Die volle Funktionalität ist in Hunyuan3D Studio verfügbar, und abgespeckte Versionen von P3-SAM und X-Part sind im Repository verfügbar.
2. Kernfunktionen
1. Native 3D-Segmentierung : P3-SAM führt die Teileerkennung und Instanzsegmentierung direkt in 3D durch und unterstützt Punkthinweise und vollautomatische Prozesse.
2. Kontrollierbare Komponentengenerierung : X-Part verwendet Begrenzungsrahmen als Einschränkungen, integriert semantische und geometrische Merkmale und generiert diffus strukturell konsistente Komponenten.
3. Reines 3D-Datentraining : Beseitigt die Abhängigkeit von 2D-SAM und verlässt sich auf groß angelegte 3D-/Komponentenannotationsdaten, um die Robustheit zu verbessern.
4. End-to-End-Pipeline : zuerst aufteilen und dann generieren, bearbeitbar, austauschbar und wiederverwendbar.
5. Parallele leichte und schwere Versionen : Leichtgewichtige Open-Source-Version; alle Funktionen sind im Studio erlebbar.
3. Installation
1. Klonen Sie das Repository: git clone https://github.com/Tencent-Hunyuan/Hunyuan3D-Part.
2. Umgebungsvorbereitung: Installieren Sie Abhängigkeiten und PyTorch/CUDA entsprechend den Anforderungen der Unterverzeichnisse P3-SAM/ und XPart/.
- Gewichte herunterladen: Holen Sie sich die entsprechenden Prüfpunkte von der Hugging Face-Modellseite und fügen Sie sie in die angegebenen Pfade jedes Untermoduls ein.
- Kurze Erfahrung: Führen Sie das P3-SAM-Segmentierungsskript aus, um Teile und Begrenzungsrahmen zu erhalten, und rufen Sie dann X-Part auf, um fertige Teile zu generieren. Oder verwenden Sie Hugging Face Space direkt für eine einfache Demonstration.
Typische Anwendungsfälle
1. Wiederverwendung und Bearbeitung von Assets : Segmentieren Sie gescannte oder generierte Netze automatisch und ersetzen Sie einzelne Komponenten.
2. Unterstützung bei der Modellierung auf Produktionsebene : Aufrechterhaltung der strukturellen Konsistenz und Erleichterung der Topologierekonstruktion und UV-Entfaltung.
3. Designiteration : Erkunden Sie schnell die Form und Baugruppe von Komponenten mithilfe von Begrenzungsrahmenbeschränkungen.
4. Drucken und Fertigen : Ausgabe unabhängiger Teile zur Anpassung an Materialien und Prozesse.
5. Ökosystem und Wettbewerbsprodukte
- Ökosystem: Verbinden Sie die Hunyuan3D-Serie und das Studio; stellen Sie Hugging Face-Modelle und -Demonstrationen bereit.
Wettbewerber: SAMPart3D, PartField und PartGen basieren stark auf 2D/3D-Destillation oder Multi-View-Lösungen. Hunyuan3D-Part unterscheidet sich durch seine integrierte Pipeline aus nativer 3D-Segmentierung und kontrollierter Diffusionsgenerierung . Die spezifischen Vor- und Nachteile von Hunyuan3D-Part werden anhand öffentlicher Benchmarks und Szenarioüberprüfungen ermittelt.
VI. Einschränkungen und Vorsichtsmaßnahmen
- Die Open-Source-Version ist die leichte Version von X-Part und die volle Funktionalität ist in Studio enthalten; die Schnittstelle und die Indikatoren können sich mit jeder Version weiterentwickeln.
- Langschwänzige Formen und Rauschgitter müssen weiterhin manuell überprüft werden.
- Training/Inferenz erfordert Videospeicher, und moderne GPUs werden empfohlen. Die Netzqualität beeinflusst die Segmentierung und die Generierungsstabilität.
- Bitte beachten Sie die jeweiligen Lizenz- und Nutzungsbedingungen der Datensätze von Drittanbietern.
7. Projektadresse
https://github.com/Tencent-Hunyuan/Hunyuan3D-Part
8. Häufig gestellte Fragen
F: Ist Hunyuan3D-Part von 2D SAM abhängig?
A: Nein. P3-SAM ist ein natives 3D-Segmentierungsmodell und sowohl Training als auch Inferenz werden im 3D-Raum durchgeführt.
F: Was ist der Umfang und die Quelle der Daten?
A: Im Dokument wird angegeben, dass für die Anmerkungen etwa 3,7 Millionen Formen und saubere Teile verwendet wurden (die genaue Zusammensetzung hängt vom Dokument und der Modellkarte ab).
F: Irgendwelche Vorschläge für Eingaberaster?
A: P3-SAM ist robust gegenüber Eingaben, aber X-Part eignet sich besser zum Scannen oder zur hochwertigen Netzgenerierung.
F: Was ist der Unterschied zwischen der Lite-Version und Studio?
A: Die Lightweight-Version eignet sich gut für die lokale Reproduktion und Recherche; Studio bietet umfassendere und stabilere Funktionen auf Produktionsebene und Unterstützung für die Rechenleistung.
F: Gibt es ein Online-Erlebnis?
A: Sie können Hugging Face für eine einfache Demo verwenden. Wenn Sie die volle Funktionalität benötigen, gehen Sie zu Hunyuan3D Studio.
