텐센트 혼원3D 2.0 시스템 출시 - 고품질 3D 자산 생성
텐센트는 텍스트와 이미지를 기반으로 고해상도 3D 모델을 생성하는 대규모 자산 생성 시스템인 혼원3D 2.0을 공식 출시했습니다. 이 시스템은 두 단계 생성 프로세스를 사용하여 먼저 무텍스 기하 모델을 생성한 후, 고해상도 텍스처 맵을 합성하여 형태와 텍스처 생성의 복잡성을 효과적으로 분리합니다.
핵심 시스템 구성 요소
혼원3D 2.0은 두 가지 주요 구성 요소로 이루어져 있습니다:
- 혼원3D-DiT (기하 생성 모델): 흐름 확산 변환기 아키텍처를 기반으로 하여 입력 조건에 정확히 일치하는 무텍스 기하 모델을 생성합니다. 이 구성 요소는 기하 세부 사항의 정확성을 강조하며, 입력 이미지의 주요 특징을 포착할 수 있습니다.
- 혼원3D-Paint (텍스처 합성 모델): 기하 조건과 다중 뷰 확산 기술을 결합하여 모델에 고해상도 텍스처를 추가하며, PBR 재료를 지원합니다. 이 구성 요소는 형태에 맞는 고품질 텍스처를 생성하여 최종 모델을 더욱 현실감 있게 만듭니다.
최근(2025년 3월 18일) 혼원3D 2.0은 다중 뷰 형태 생성 모델(혼원3D-2mv)을 도입하여 서로 다른 각도에서 입력을 통해 더 상세한 기하 구조를 생성할 수 있도록 지원합니다. 이는 복잡한 객체를 생성하는 데 특히 유용합니다.
주요 기능 및 장점
- 고해상도 3D 모델 생성: 두 단계 프로세스를 통해 고품질 3D 모델을 생성하여 기하 구조와 텍스처 간의 조화를 보장합니다.
- 고품질 생성 결과: 기하 세부 사항, 조건 정렬 및 텍스처 품질에서 우수한 성능을 보이며, 생성된 모델은 게임, VR 및 AR 애플리케이션에서 직접 사용할 수 있습니다.
- 다양한 사용 방법: 코드 호출, Gradio 애플리케이션, Blender 플러그인 및 공식 웹사이트를 통한 빠른 경험을 지원하여 다양한 사용자의 요구를 충족합니다.
- 경량 및 호환성: 혼원3D-2mini 모델은 5GB VRAM만 필요하며, 표준 버전은 형태 생성을 위해 6GB VRAM이 필요하고, 전체 프로세스(형태 + 텍스처)는 12GB VRAM만 필요하여 소비자급 하드웨어에 적합합니다.
오픈 소스 모델 시리즈
현재 혼원3D 2.0은 전체 3D 생성 프로세스를 포괄하는 여러 모델을 오픈 소스화했습니다:
혼원3D-2mini 시리즈
| 모델 | 설명 | 날짜 | 매개변수 | 저장소 |
|---|---|---|---|---|
| 혼원3D-DiT-v2-mini | 미니 이미지에서 형태 모델 | 2025-03-18 | 0.6B | 저장소 방문 |
혼원3D-2mv 시리즈
| 모델 | 설명 | 날짜 | 매개변수 | 저장소 |
|---|---|---|---|---|
| 혼원3D-DiT-v2-mv-Fast | 가이드 증류 버전, DIT 추론 시간을 절반으로 줄일 수 있습니다. | 2025-03-18 | 1.1B | 저장소 방문 |
| 혼원3D-DiT-v2-mv | 다중 뷰 이미지에서 형태 모델, 장면을 이해하기 위해 여러 각도가 필요한 3D 생성에 적합합니다. | 2025-03-18 | 1.1B | 저장소 방문 |
혼원3D-2 시리즈
| 모델 | 설명 | 날짜 | 매개변수 | 저장소 |
|---|---|---|---|---|
| 혼원3D-DiT-v2-0-Fast | 가이드 증류 모델 | 2025-02-03 | 1.1B | 저장소 방문 |
| 혼원3D-DiT-v2-0 | 이미지에서 형태 모델 | 2025-01-21 | 1.1B | 저장소 방문 |
| 혼원3D-Paint-v2-0 | 텍스처 생성 모델 | 2025-01-21 | 1.3B | 저장소 방문 |
| 혼원3D-Delight-v2-0 | 이미지 디라이트 모델 | 2025-01-21 | 1.3B | 저장소 방문 |
사용 사례
혼원3D 2.0은 다양한 응용 시나리오를 가지고 있습니다. 예를 들어, 스케치를 직접 가져와 시스템이 만화 스타일의 3D 모델을 생성하도록 할 수 있습니다. 전체 생성 프로세스는 몇십 초 만에 완전한 3D 모델을 생성합니다. 1.0 버전과 비교하여 혼원3D 2.0은 기하 구조에서 더욱 날카롭고 정밀해졌으며, 재료도 더욱 안정적입니다.
실제 응용 프로그램에서 이러한 생성된 모델은 게임 개발, 가상 현실 콘텐츠 생성, 제품 디자인 프로토타입 및 교육 시연에 사용될 수 있습니다. 전문 3D 모델링 기술이 부족한 제작자에게 이 도구는 고품질 3D 자산 생성의 장벽을 크게 낮춥니다.
관련 리소스
- 프로젝트 웹사이트: https://3d-models.hunyuan.tencent.com/
- GitHub 저장소: https://github.com/Tencent/Hunyuan3D-2
- 온라인 체험: 프로젝트 웹사이트를 통해 혼원3D 2.0의 강력한 기능을 직접 체험할 수 있으며, 로컬 설치가 필요하지 않습니다.
커뮤니티 리소스
아래는 혼원3D-2와 관련된 ComfyUI 커뮤니티 리소스입니다:
- ComfyUI-Hunyuan3DWrapper - 혼원3D 2.0 ComfyUI 통합을 보다 포괄적으로 제공합니다.
- ComfyUI-3D-Pack - 다양한 3D 생성 도구를 포함하는 ComfyUI 확장 패키지
- Kijai/Hunyuan3D-2_safetensors - 커뮤니티에서 변환한 safetensors 형식의 모델 파일