ATI: Any Trajectory Instructionによる制御可能なビデオ生成
ByteDance ResearchによるATIは、Wan2.1向けの軌道ベースのモーション制御フレームワークです。任意の軌道指示を用いて、オブジェクト、ローカル領域、カメラの動き制御を統合します。
A
ATI
Wan2.1ビデオ生成モーション制御軌道制御オープンソースByteDance ResearchによるAny Trajectory Instruction（制御可能なビデオ生成向け）。Wan2.1をベースに、軌道ベースのモーションガイダンスを通じてオブジェクト、ローカル領域、カメラの動き制御を統合します。
| 開発元 | ByteDance Research |
| アーキテクチャ | Wan2.1ベース、軌道条件付け付き |
| モデルサイズ | 14B (fp16/fp8/fp8_e5m2) |
| 機能 | オブジェクト軌道、領域モーション、カメラ軌道制御 |
概要
ATI (Any Trajectory Instruction) は、ByteDance Researchによる軌道ベースのモーション制御フレームワークであり、Wan2.1ビデオ生成に正確なモーション制御をもたらします。オブジェクトレベルの軌道、ローカル領域の動き、カメラモーションの3種類のモーション制御を単一のフレームワークに統合します。ユーザーは、ビデオコンテンツ生成時にモデルが従う任意の軌道を指定できます。
本フレームワークは480P解像度での画像から動画への生成をサポートし、生成シーケンス全体でオブジェクトやカメラがどのように動くかを細かく制御できます。
ComfyUI連携
ATI-Wan2.1モデルは、Kijai WanVideoWrapperを通じてComfyUIで利用可能です。fp8およびfp8_e5m2量子化バリアントにより、コンシューマーGPU上での効率的な推論が可能です。
利用可能なサイズ
| サイズ | 精度 | 解像度 |
|---|---|---|
| 14B | fp16 | 480P I2V |
| 14B | fp8 | 480P I2V |
| 14B | fp8_e5m2 | 480P I2V |
リソース
| リソース | リンク |
|---|---|
| GitHubリポジトリ | github.com/bytedance/ATI |
| プロジェクトページ | anytraj.github.io |
| Hugging Face (オリジナル) | bytedance-research/ATI |
| Hugging Face (Kijai) | Kijai/WanVideo_comfy |
Guides and workflows related to this model series.
No articles found.