ATI: Any Trajectory Instruction para generación de video controlable

ATI de ByteDance Research es un marco de control de movimiento basado en trayectorias para Wan2.1. Unifica el control de movimiento de objetos, regiones locales y cámara utilizando instrucciones de trayectoria arbitrarias.

A

ATI

Wan2.1Generación de videoControl de movimientoControl de trayectoriaCódigo abierto

Any Trajectory Instruction para generación de video controlable por ByteDance Research. Construido sobre Wan2.1, unifica el control de movimiento de objetos, regiones locales y cámara mediante guía de movimiento basada en trayectorias.

DesarrolladorByteDance Research
ArquitecturaBasado en Wan2.1 con condicionamiento de trayectoria
Tamaños del modelo14B (fp16/fp8/fp8_e5m2)
CapacidadesTrayectoria de objetos, movimiento de regiones, control de trayectoria de cámara

Descripción general

ATI (Any Trajectory Instruction) es un marco de control de movimiento basado en trayectorias de ByteDance Research que aporta un control de movimiento preciso a la generación de video con Wan2.1. Unifica tres tipos de control de movimiento en un solo marco: trayectoria de objetos, movimiento de regiones locales y movimiento de cámara. Los usuarios pueden especificar trayectorias arbitrarias que el modelo sigue al generar contenido de video.

El marco admite generación de imagen a video (I2V) en resolución 480P y proporciona un control detallado sobre cómo se mueven los objetos y la cámara a lo largo de la secuencia generada.

Integración con ComfyUI

Los modelos ATI-Wan2.1 están disponibles para ComfyUI a través del WanVideoWrapper de Kijai. Las variantes cuantizadas fp8 y fp8_e5m2 permiten una inferencia eficiente en GPUs de consumo.

Tamaños disponibles

TamañoPrecisiónResolución
14Bfp16480P I2V
14Bfp8480P I2V
14Bfp8_e5m2480P I2V

Recursos

RecursoEnlace
Repositorio de GitHubgithub.com/bytedance/ATI
Página del proyectoanytraj.github.io
Hugging Face (Original)bytedance-research/ATI
Hugging Face (Kijai)Kijai/WanVideo_comfy

Guides and workflows related to this model series.

No articles found.