腾讯混元3D 2.0发布:开源高质量3D生成大模型与全流程创作引擎
腾讯近日发布混元3D 2.0版本,这是业界首个完全开源的高质量3D-DiT(Diffusion Transformer)生成大模型。相比1.0版本,新版本采用了创新的两阶段生成管线:先生成高质量裸网格,再合成精细纹理贴图。这种策略不仅有效解决了形状与纹理生成的复杂性问题,还为后续的自定义创作提供了更大的灵活性。
核心技术突破
混元3D 2.0的核心由两大基础组件构成:
- 大规模形状生成模型(Hunyuan3D-DiT):基于可扩展的基于流的扩散变换器构建,能够创建与给定条件图像精确对齐的几何形状
- 大规模纹理合成模型(Hunyuan3D-Paint):利用强大的几何和扩散先验,为生成或手工制作的网格生成高分辨率、生动的纹理贴图
创新的生成管线
相比1.0版本,混元3D 2.0采用了创新的两阶段生成管线:
- 先生成裸网格:创建基础的3D几何形状
- 再合成纹理贴图:为模型添加高质量的材质表现
这种策略有效地将形状和纹理的生成难度分离,不仅提高了生成质量,还为后续的自定义创作提供了更大的灵活性。
全方位AI创作能力
1. 一键式3D动画生成
- 支持模型自动绑定骨骼
- 内置丰富的动画预设
- 人形和动物模型可直接生成对应动画预览
2. 多模态3D生成
- 文生3D:通过文本描述生成3D模型
- 图生3D:从参考图片生成对应3D模型
- 草图转3D:将黑白线条草图转换为精细3D模型
- 人像3D化:从人像照片直接生成3D人物模型
3. 智能纹理系统
- PBR材质生成:支持生成完整的PBR贴图系统
- 包含漫反射、金属度、粗糙度、法线等
- 相比基础颜色贴图呈现更真实的视觉效果
- 风格化纹理:支持通过文字描述生成不同风格的贴图
- 材质迁移:为白模快速更换不同风格的材质和颜色
4. 游戏优化功能
- 低多边形生成:
- 支持直接生成低面数模型
- 可自定义优化强度
- 有效降低游戏硬件计算压力
- 自定义渲染系统:
- 灵活的光源控制
- 可调节光线颜色和位置
- 支持射灯和平面光强度设置
相关资源
开发者可以通过以下渠道获取混元3D 2.0资源:
- 模型下载:Hugging Face - tencent/Hunyuan3D-2
- 源代码:GitHub - Tencent/Hunyuan3D-2
- 创作平台:混元3D创作引擎
- 官方在线体验:https://3d.hunyuan.tencent.com/
ComfyUI Wrapper
- ComfyUI Wrapper: ComfyUI-Hunyuan3DWrapper