Tencent lance Hunyuan3D 2.0 : Modèle de génération 3D haute qualité open source et moteur de création intégral
Tencent a récemment lancé Hunyuan3D 2.0, le premier modèle de génération 3D-DiT (Diffusion Transformer) haute qualité entièrement open source de l’industrie. La nouvelle version introduit un pipeline de génération innovant en deux étapes : génération de maillages de base haute qualité, puis synthèse de cartes de textures détaillées. Cette stratégie sépare efficacement la complexité de la génération des formes et des textures, offrant une plus grande flexibilité pour la personnalisation ultérieure.
Avancées techniques majeures
Hunyuan3D 2.0 se compose de deux composants fondamentaux :
- Modèle de génération de formes à grande échelle (Hunyuan3D-DiT) : Construit sur un transformateur de diffusion basé sur le flux évolutif, capable de créer des géométries précisément alignées avec les images de condition données
- Modèle de synthèse de textures à grande échelle (Hunyuan3D-Paint) : Utilisant de puissants a priori géométriques et de diffusion pour générer des cartes de textures haute résolution et vivantes pour les maillages générés et créés manuellement
Capacités complètes de création par IA
1. Génération d’animation 3D en un clic
- Liaison automatique du squelette pour les modèles
- Riche bibliothèque de préréglages d’animation
- Aperçu direct d’animation pour les modèles humanoïdes et animaux
2. Génération 3D multimodale
- Texte vers 3D : Génère des modèles 3D à partir de descriptions textuelles
- Image vers 3D : Crée des modèles 3D correspondants à partir d’images de référence
- Croquis vers 3D : Convertit des croquis en noir et blanc en modèles 3D détaillés
- Portrait vers 3D : Génère des modèles de personnages 3D directement à partir de photos de portrait
3. Système de texture intelligent
- Génération de matériaux PBR : Support pour système complet de mapping PBR
- Inclut les cartes de diffusion, métallique, rugosité et normales
- Effets visuels plus réalistes par rapport aux cartes de couleur de base
- Textures stylisées : Génère différents styles de textures via des descriptions textuelles
- Transfert de matériaux : Changements rapides de style et de couleur pour les modèles blancs
4. Fonctionnalités d’optimisation pour les jeux
- Génération Low-Poly :
- Génération directe de modèles à faible nombre de polygones
- Intensité d’optimisation personnalisable
- Réduit efficacement la pression de calcul du matériel de jeu
- Système de rendu personnalisé :
- Contrôle flexible des sources lumineuses
- Couleur et position de la lumière ajustables
- Support pour le réglage de l’intensité des spots et de la lumière plane
Ressources pour les développeurs
Les développeurs peuvent accéder aux ressources Hunyuan3D 2.0 via :
- Téléchargement du modèle : Hugging Face - tencent/Hunyuan3D-2
- Code source : GitHub - Tencent/Hunyuan3D-2
- Plateforme de création : Moteur de création Hunyuan3D
- Expérience en ligne officielle : https://3d.hunyuan.tencent.com/
Intégration ComfyUI
- ComfyUI Wrapper : ComfyUI-Hunyuan3DWrapper