Tencent выпускает Hunyuan3D 2.0: модель генерации 3D с открытым исходным кодом и сквозной движок создания

Tencent недавно выпустил Hunyuan3D 2.0 — первую в отрасли полностью открытую высококачественную модель генерации 3D-DiT (Diffusion Transformer). Новая версия представляет инновационный двухэтапный конвейер генерации: сначала генерирует высококачественные базовые меши, затем синтезирует детальные карты текстур. Эта стратегия эффективно разделяет сложность генерации формы и текстуры, обеспечивая большую гибкость для последующей настройки.

Ключевые технические прорывы

Hunyuan3D 2.0 состоит из двух фундаментальных компонентов:

• Масштабная модель генерации формы (Hunyuan3D-DiT): Построена на масштабируемом flow-based diffusion transformer, способна создавать геометрии, точно соответствующие заданным условным изображениям
• Масштабная модель синтеза текстур (Hunyuan3D-Paint): Использует мощные геометрические и диффузионные априори для генерации высокоразрешающих, ярких карт текстур как для сгенерированных, так и для созданных вручную мешей

Комплексные возможности ИИ-создания

1. Генерация 3D-анимации одним кликом

• Автоматическая привязка скелета для моделей
• Богатая библиотека пресетов анимации
• Прямой предварительный просмотр анимации для гуманоидных и животных моделей

2. Мультимодальная 3D-генерация

• Текст в 3D: Генерация 3D-моделей из текстовых описаний
• Изображение в 3D: Создание соответствующих 3D-моделей из референсных изображений
• Эскиз в 3D: Преобразование черно-белых линейных эскизов в детальные 3D-модели
• Портрет в 3D: Генерация 3D-моделей персонажей прямо из портретных фотографий

3. Интеллектуальная система текстур

• Генерация PBR-материалов: Поддержка полной системы PBR-маппинга
  • Включает диффузные, металлические, шероховатости, нормальные карты
  • Более реалистичные визуальные эффекты по сравнению с базовыми цветовыми картами
• Стилизованные текстуры: Генерация различных стилевых текстур через текстовые описания
• Перенос материалов: Быстрые изменения стиля и цвета для белых моделей

4. Функции оптимизации для игр

• Генерация низкополигональных моделей:
  • Прямая генерация низкополигональных моделей
  • Настраиваемая интенсивность оптимизации
  • Эффективно снижает вычислительную нагрузку на игровое оборудование
• Пользовательская система рендеринга:
  • Гибкое управление источниками света
  • Настраиваемый цвет и положение света
  • Поддержка настроек интенсивности прожекторов и плоскостного света

Ресурсы для разработчиков

Разработчики могут получить доступ к ресурсам Hunyuan3D 2.0 через:

• Скачивание модели: Hugging Face - tencent/Hunyuan3D-2
• Исходный код: GitHub - Tencent/Hunyuan3D-2
• Платформа создания: Hunyuan3D Creation Engine
• Официальный онлайн-опыт: https://3d.hunyuan.tencent.com/

Интеграция с ComfyUI

• ComfyUI Wrapper: ComfyUI-Hunyuan3DWrapper

Ссылки:

• Hugging Face - tencent/Hunyuan3D-2
• GitHub - Tencent/Hunyuan3D-2