ATI: Any Trajectory Instruction para generación de video controlable
ATI de ByteDance Research es un marco de control de movimiento basado en trayectorias para Wan2.1. Unifica el control de movimiento de objetos, regiones locales y cámara utilizando instrucciones de trayectoria arbitrarias.
ATI
Wan2.1Generación de videoControl de movimientoControl de trayectoriaCódigo abiertoAny Trajectory Instruction para generación de video controlable por ByteDance Research. Construido sobre Wan2.1, unifica el control de movimiento de objetos, regiones locales y cámara mediante guía de movimiento basada en trayectorias.
| Desarrollador | ByteDance Research |
| Arquitectura | Basado en Wan2.1 con condicionamiento de trayectoria |
| Tamaños del modelo | 14B (fp16/fp8/fp8_e5m2) |
| Capacidades | Trayectoria de objetos, movimiento de regiones, control de trayectoria de cámara |
Descripción general
ATI (Any Trajectory Instruction) es un marco de control de movimiento basado en trayectorias de ByteDance Research que aporta un control de movimiento preciso a la generación de video con Wan2.1. Unifica tres tipos de control de movimiento en un solo marco: trayectoria de objetos, movimiento de regiones locales y movimiento de cámara. Los usuarios pueden especificar trayectorias arbitrarias que el modelo sigue al generar contenido de video.
El marco admite generación de imagen a video (I2V) en resolución 480P y proporciona un control detallado sobre cómo se mueven los objetos y la cámara a lo largo de la secuencia generada.
Integración con ComfyUI
Los modelos ATI-Wan2.1 están disponibles para ComfyUI a través del WanVideoWrapper de Kijai. Las variantes cuantizadas fp8 y fp8_e5m2 permiten una inferencia eficiente en GPUs de consumo.
Tamaños disponibles
| Tamaño | Precisión | Resolución |
|---|---|---|
| 14B | fp16 | 480P I2V |
| 14B | fp8 | 480P I2V |
| 14B | fp8_e5m2 | 480P I2V |
Recursos
| Recurso | Enlace |
|---|---|
| Repositorio de GitHub | github.com/bytedance/ATI |
| Página del proyecto | anytraj.github.io |
| Hugging Face (Original) | bytedance-research/ATI |
| Hugging Face (Kijai) | Kijai/WanVideo_comfy |
Guides and workflows related to this model series.