ATI : instruction de trajectoire pour la génération vidéo contrôlable
ATI de ByteDance Research contrôle le mouvement par trajectoire sur Wan2.1. Il unifie objets, régions locales et caméra via des instructions de trajectoire arbitraires.
ATI
Wan2.1Génération vidéoContrôle de mouvementContrôle de trajectoireOpen SourceAny Trajectory Instruction pour la génération vidéo contrôlable par ByteDance Research. Construit sur Wan2.1, il unifie le contrôle des objets, des régions locales et des mouvements de caméra grâce à un guidage de mouvement par trajectoire.
Aperçu
ATI (Any Trajectory Instruction) est un framework de contrôle de mouvement par trajectoire de ByteDance Research qui apporte un contrôle de mouvement précis à la génération vidéo Wan2.1. Il unifie trois types de contrôle de mouvement dans un seul framework : la trajectoire au niveau de l'objet, le mouvement de région locale et le mouvement de caméra. Les utilisateurs peuvent spécifier des trajectoires arbitraires que le modèle suit lors de la génération du contenu vidéo.
Le framework prend en charge la génération image-vers-vidéo en résolution 480P et offre un contrôle fin sur la manière dont les objets et la caméra se déplacent tout au long de la séquence générée.
Intégration ComfyUI
Les modèles ATI-Wan2.1 sont disponibles pour ComfyUI via le Kijai WanVideoWrapper. Les variantes quantifiées fp8 et fp8_e5m2 permettent une inférence efficace sur les GPU grand public.
Tailles disponibles
| Taille | Précision | Résolution |
|---|---|---|
| 14B | fp16 | I2V 480P |
| 14B | fp8 | I2V 480P |
| 14B | fp8_e5m2 | I2V 480P |
Ressources
| Ressource | Lien |
|---|---|
| Référentiel GitHub | github.com/bytedance/ATI |
| Page du projet | anytraj.github.io |
| Hugging Face (original) | bytedance-research/ATI |
| Hugging Face (Kijai) | Kijai/WanVideo_comfy |
Guides and workflows related to this model series.
Commentaires
Connectez-vous avec GitHub pour rejoindre la discussion.