Tencent выпускает Hunyuan3D 2.0: модель генерации 3D с открытым исходным кодом и сквозной движок создания
Tencent недавно выпустил Hunyuan3D 2.0 — первую в отрасли полностью открытую высококачественную модель генерации 3D-DiT (Diffusion Transformer). Новая версия представляет инновационный двухэтапный конвейер генерации: сначала генерирует высококачественные базовые меши, затем синтезирует детальные карты текстур. Эта стратегия эффективно разделяет сложность генерации формы и текстуры, обеспечивая большую гибкость для последующей настройки.
Ключевые технические прорывы
Hunyuan3D 2.0 состоит из двух фундаментальных компонентов:
- Масштабная модель генерации формы (Hunyuan3D-DiT): Построена на масштабируемом flow-based diffusion transformer, способна создавать геометрии, точно соответствующие заданным условным изображениям
- Масштабная модель синтеза текстур (Hunyuan3D-Paint): Использует мощные геометрические и диффузионные априори для генерации высокоразрешающих, ярких карт текстур как для сгенерированных, так и для созданных вручную мешей
Комплексные возможности ИИ-создания
1. Генерация 3D-анимации одним кликом
- Автоматическая привязка скелета для моделей
- Богатая библиотека пресетов анимации
- Прямой предварительный просмотр анимации для гуманоидных и животных моделей
2. Мультимодальная 3D-генерация
- Текст в 3D: Генерация 3D-моделей из текстовых описаний
- Изображение в 3D: Создание соответствующих 3D-моделей из референсных изображений
- Эскиз в 3D: Преобразование черно-белых линейных эскизов в детальные 3D-модели
- Портрет в 3D: Генерация 3D-моделей персонажей прямо из портретных фотографий
3. Интеллектуальная система текстур
- Генерация PBR-материалов: Поддержка полной системы PBR-маппинга
- Включает диффузные, металлические, шероховатости, нормальные карты
- Более реалистичные визуальные эффекты по сравнению с базовыми цветовыми картами
- Стилизованные текстуры: Генерация различных стилевых текстур через текстовые описания
- Перенос материалов: Быстрые изменения стиля и цвета для белых моделей
4. Функции оптимизации для игр
- Генерация низкополигональных моделей:
- Прямая генерация низкополигональных моделей
- Настраиваемая интенсивность оптимизации
- Эффективно снижает вычислительную нагрузку на игровое оборудование
- Пользовательская система рендеринга:
- Гибкое управление источниками света
- Настраиваемый цвет и положение света
- Поддержка настроек интенсивности прожекторов и плоскостного света
Ресурсы для разработчиков
Разработчики могут получить доступ к ресурсам Hunyuan3D 2.0 через:
- Скачивание модели: Hugging Face - tencent/Hunyuan3D-2
- Исходный код: GitHub - Tencent/Hunyuan3D-2
- Платформа создания: Hunyuan3D Creation Engine
- Официальный онлайн-опыт: https://3d.hunyuan.tencent.com/
Интеграция с ComfyUI
- ComfyUI Wrapper: ComfyUI-Hunyuan3DWrapper