I. 요약
Hunyuan3D-Part는 Tencent Hunyuan의 오픈 소스 컴포넌트 수준 3D 형상 생성 및 분해 솔루션입니다. P3-SAM (네이티브 3D 파트 분할)과 X-Part (제어 가능한 파트 생성)로 구성되어 있으며, 학습 과정에서 2D SAM에 의존하지 않습니다. 약 370만 개의 형상과 깔끔한 파트 주석을 기반으로 자동화된 3D 분할 및 확산 파트 생성을 제공합니다. 본 논문은 여러 벤치마크에서 최첨단 결과를 달성했다고 보고합니다. 모든 기능은 Hunyuan3D Studio에서 사용할 수 있으며, P3-SAM 및 X-Part의 경량 버전은 저장소에서 제공됩니다.
2. 핵심 기능
1. 기본 3D 분할 : P3-SAM은 3D에서 직접 부품 감지 및 인스턴스 분할을 수행하여 포인트 힌팅 및 완전 자동 프로세스를 지원합니다.
2. 제어 가능한 구성 요소 생성 : X-Part는 경계 상자를 제약 조건으로 사용하고, 의미적 및 기하학적 특징을 통합하며, 구조적으로 일관된 구성 요소를 확산적으로 생성합니다.
3. 순수 3D 데이터 학습 : 2D SAM에 대한 의존성을 제거하고 대규모 3D/구성요소 주석 데이터를 사용하여 견고성을 향상시킵니다.
4. 엔드투엔드 파이프라인 : 먼저 분할한 다음 생성하여 편집, 교체 및 재사용이 가능합니다.
5. 병렬 경량 버전과 중량 버전 : 오픈 소스 경량 버전으로, Studio에서 모든 기능을 체험할 수 있습니다.
3. 설치
1. 저장소를 복제합니다: git clone https://github.com/Tencent-Hunyuan/Hunyuan3D-Part.
2. 환경 준비: 하위 디렉토리 P3-SAM/ 및 XPart/의 요구 사항에 따라 종속성과 PyTorch/CUDA를 설치합니다.
- 가중치 다운로드: Hugging Face 모델 페이지에서 해당 체크포인트를 가져와 각 하위 모듈의 지정된 경로에 넣습니다.
- 빠른 경험: P3-SAM 분할 스크립트를 실행하여 부분과 경계 상자를 얻은 다음 X-Part를 호출하여 완성된 부분을 생성하거나 가벼운 데모를 위해 Hugging Face Space를 직접 사용합니다.
일반적인 사용 사례
1. 자산 재사용 및 편집 : 스캔되거나 생성된 메시를 자동으로 분할하고 개별 구성 요소를 교체합니다.
2. 생산 수준 모델링 지원 : 구조적 일관성을 유지하고 토폴로지 재구성과 UV 전개를 용이하게 합니다.
3. 설계 반복 : 경계 상자 제약 조건을 사용하여 구성 요소 모양과 조립을 빠르게 탐색합니다.
4. 인쇄 및 제조 : 재료 및 공정에 맞게 독립적인 부품을 출력합니다.
5. 생태계 및 경쟁 제품
- 생태계: Hunyuan3D 시리즈와 Studio를 연결하여 Hugging Face 모델과 데모를 제공합니다.
경쟁사: SAMPart3D, PartField, PartGen은 2D/3D 증류 또는 멀티뷰 솔루션에 크게 의존합니다. Hunyuan3D-Part는 네이티브 3D 분할 및 제어 확산 생성을 통합한 파이프라인을 통해 차별화됩니다. Hunyuan3D-Part의 구체적인 장단점은 공개 벤치마크 및 시나리오 검증을 기반으로 결정됩니다.
VI. 제한 사항 및 주의사항
- 오픈소스 버전은 X-Part 경량 버전이며, 모든 기능은 Studio에 포함되어 있습니다. 인터페이스와 지표는 버전마다 진화할 수 있습니다.
- 긴꼬리 모양과 노이즈 그리드는 여전히 수동으로 검토해야 합니다.
- 학습/추론에는 비디오 메모리가 필요하며, 최신 GPU를 권장합니다. 메시 품질은 분할 및 생성 안정성에 영향을 미칩니다.
- 타사 데이터 세트의 해당 라이센스 및 약관을 준수하세요.
7. 프로젝트 주소
https://github.com/Tencent-Hunyuan/Hunyuan3D-Part
8. 자주 묻는 질문
질문: Hunyuan3D-Part는 2D SAM에 의존합니까?
A: 아니요. P3-SAM은 기본 3D 분할 모델이며, 훈련과 추론은 모두 3D 공간에서 수행됩니다.
질문: 데이터의 규모와 출처는 어떻게 되나요?
A: 논문에서는 약 370만 개의 모양과 깨끗한 부분이 주석에 사용되었다고 명시되어 있습니다(구체적인 구성은 논문과 모델 카드에 따라 다릅니다).
질문: 입력 그리드에 대한 제안이 있나요?
A: P3-SAM은 입력에 강하지만, X-Part는 스캐닝이나 고품질 메시 생성에 더 적합합니다.
질문: Lite 버전과 Studio의 차이점은 무엇인가요?
A: 가벼운 버전은 로컬 복제 및 연구에 편리하며, Studio는 보다 완벽하고 안정적인 프로덕션 수준의 기능과 컴퓨팅 파워 지원을 제공합니다.
질문: 온라인으로도 경험할 수 있나요?
A: 가벼운 데모로는 Hugging Face를 사용하실 수 있습니다. 모든 기능을 사용하려면 Hunyuan3D Studio를 사용하세요.
