ATI: 제어 가능한 비디오 생성을 위한 Any Trajectory Instruction

ByteDance Research의 ATI는 Wan2.1을 위한 궤적 기반 모션 제어 프레임워크입니다. 모든 궤적 명령을 사용하여 객체, 로컬 및 카메라 움직임 제어를 통합합니다.

A

ATI

Wan2.1비디오 생성모션 제어궤적 제어오픈 소스

ByteDance Research의 제어 가능한 비디오 생성을 위한 Any Trajectory Instruction. Wan2.1을 기반으로 하며, 궤적 기반 모션 가이드를 통해 객체, 로컬 영역 및 카메라 움직임 제어를 통합합니다.

개발자ByteDance Research
아키텍처Wan2.1 기반, 궤적 조건화
모델 크기14B (fp16/fp8/fp8_e5m2)
기능객체 궤적, 영역 모션, 카메라 궤적 제어

개요

ATI(Any Trajectory Instruction)는 ByteDance Research의 궤적 기반 모션 제어 프레임워크로, Wan2.1 비디오 생성에 정밀한 모션 제어를 제공합니다. 객체 수준 궤적, 로컬 영역 움직임, 카메라 모션의 세 가지 유형의 모션 제어를 단일 프레임워크에서 통합합니다. 사용자는 비디오 콘텐츠를 생성할 때 모델이 따라야 할 임의의 궤적을 지정할 수 있습니다.

이 프레임워크는 480P 해상도의 이미지 기반 비디오 생성을 지원하며, 생성된 시퀀스 전체에서 객체와 카메라의 움직임을 세밀하게 제어할 수 있습니다.

ComfyUI 통합

ATI-Wan2.1 모델은 Kijai WanVideoWrapper를 통해 ComfyUI에서 사용할 수 있습니다. fp8 및 fp8_e5m2 양자화 변형은 소비자 GPU에서 효율적인 추론을 가능하게 합니다.

사용 가능한 크기

크기정밀도해상도
14Bfp16480P I2V
14Bfp8480P I2V
14Bfp8_e5m2480P I2V

리소스

리소스링크
GitHub 저장소github.com/bytedance/ATI
프로젝트 페이지anytraj.github.io
허깅 페이스 (원본)bytedance-research/ATI
허깅 페이스 (Kijai)Kijai/WanVideo_comfy

Guides and workflows related to this model series.

No articles found.