CausVid: De generación de video bidireccional lenta a rápida causal

CausVid de lightx2v/tianweiy adapta transformadores de difusión bidireccionales a generación de video causal autorregresiva sobre Wan2.1. CVPR 2025. Disponible en 14B fp8 con LoRAs de rango 32.

C

CausVid

Wan2.1Generación de VideoGeneración CausalAutorregresivoCVPR 2025

Modelo de generación de video causal de lightx2v/tianweiy. Adapta transformadores de difusión bidireccionales Wan2.1 preentrenados a generación causal autorregresiva rápida. CVPR 2025. Disponible en 14B fp8 con LoRAs de rango 32.

Desarrolladorlightx2v / tianweiy
ArquitecturaBasado en Wan2.1 con atención autorregresiva causal
Tamaños del modelo14B (fp8), más LoRAs (rango 32)
CapacidadesGeneración de video causal en tiempo real, aplicaciones interactivas

Descripción general

CausVid (CVPR 2025) aborda una limitación fundamental de los modelos de difusión de video actuales: las dependencias de atención bidireccional que impiden el uso interactivo en tiempo real. Al adaptar un transformador de difusión bidireccional Wan2.1 preentrenado a un transformador autorregresivo causal, CausVid permite la generación cuadro por cuadro, donde cada cuadro depende únicamente de cuadros pasados en lugar de toda la secuencia.

Este enfoque reduce drásticamente la latencia para aplicaciones interactivas, lo que lo hace adecuado para escenarios de generación de video en tiempo real mientras mantiene una alta calidad de salida.

Integración con ComfyUI

CausVid para Wan2.1 está disponible en precisión fp8 junto con adaptadores LoRA de rango 32 a través del WanVideoWrapper de Kijai para ComfyUI.

Variantes disponibles

VariantePrecisiónDescripción
14B Basefp8Modelo base de generación causal
LoRAsrango 32Adaptadores de ajuste fino para generación causal

Recursos

RecursoEnlace
Repositorio de GitHubgithub.com/tianweiy/CausVid
Página del proyectocausvid.github.io
ArtículoarXiv:2412.07772
Hugging Face (Original)lightx2v/Wan2.1-T2V-14B-CausVid
Hugging Face (Kijai)Kijai/WanVideo_comfy

Guides and workflows related to this model series.

No articles found.