Skywork lance SkyReels-V1 : un modèle de génération vidéo axé sur la création de courts métrages AI
Skywork a officiellement publié son dernier modèle de génération vidéo SkyReels-V1. Ce modèle a été affiné à partir du modèle vidéo hybride (HunyuanVideo) et, grâce à l’entraînement sur des millions de données cinématographiques de haute qualité, a réalisé plusieurs percées dans le domaine de la génération vidéo.
Caractéristiques clés
Effets visuels de niveau professionnel
- Effets d’éclairage de niveau cinématographique : En apprenant à partir d’œuvres cinématographiques de haute qualité, il réalise des effets d’éclairage de niveau professionnel
- Expression de mouvement naturelle : Prend en charge 33 types d’expressions différents, pouvant réaliser plus de 400 combinaisons de mouvements naturels
- Consistance de la scène : A une excellente performance dans l’expression de la consistance entre les personnages et les scènes
Innovation technologique
-
Cadre d’inférence auto-développé
- Développement du cadre d’inférence SkyReels-Infer
- Amélioration significative de l’efficacité de l’inférence
- Optimisation de l’utilisation des ressources
-
Prise en charge multimodale
- Prise en charge des vidéos générées par texte (T2V)
- Prise en charge des vidéos générées par image (I2V)
- S’adapte de manière flexible aux différents besoins de création
Exigences matérielles et déploiement
Exigences de configuration de base
- Mémoire graphique recommandée : 16 Go ou plus
- Taille du modèle : environ 24 Go
- Prise en charge de l’inférence parallèle multi-GPU
Comparaison des performances
Sur RTX 4090 :
- Un seul GPU : génération d’une vidéo de 4 secondes prend environ 889 secondes
- 4 GPU en parallèle : le temps de génération est réduit à 293 secondes
- 8 GPU en parallèle : optimisé à 159 secondes
Effets d’application réels
Effets des vidéos générées par image
- Consistance des personnages : Peut bien maintenir les caractéristiques des personnages dans l’image d’origine
- Continuité du mouvement : Le mouvement généré est fluide et la transition est douce
- Adaptabilité de la scène : Applicable à une variété de scènes, telles que les scènes réalistes et le style bidimensionnel
Scénarios d’application
-
Création de courts métrages
- Production de courts métrages AI
- Génération de contenu vidéo créatif
- Production de matériel de marketing
-
Amélioration du contenu
- Animation d’images statiques
- Extension du contenu vidéo
- Ajout d’effets spéciaux
Intégration des développeurs
Prise en charge du plugin ComfyUI
- Nom du plugin : ComfyUI-HunyuanVideoWrapper
- Fournit un modèle de flux de travail complet
- Téléchargement de l’exemple de flux de travail
Obtention du modèle
Recommandations d’utilisation
-
Sélection de la résolution
- Il est recommandé d’utiliser une résolution de 512 par défaut
- Peut être ajusté en fonction de la mémoire graphique
- Prend en charge le traitement de mise à l’échelle vidéo ultérieur
-
Optimisation des mots d’indice
- Il est recommandé de fournir des mots d’indice détaillés
- La qualité des mots d’indice affecte directement l’effet de génération
- Prend en charge l’ajustement flexible du style
Open Source et utilisation commerciale
- Le modèle est open source sur GitHub
- Prise en charge de l’utilisation commerciale
- Fournit une documentation de déploiement détaillée et des exemples
Perspectives futures
La publication de SkyReels-V1 marque une nouvelle étape dans la technologie de génération vidéo AI. Ce modèle non seulement simplifie le processus de création, mais offre également plus de possibilités aux créateurs. L’équipe continuera à optimiser les performances du modèle et attendra les retours et contributions de la communauté.