AI Movie Studio 2: ComfyUI 向けオープンソース映画制作ワークステーション
AI Movie Studio 2 は、3D ストーリーボード、連続性システム、ロングテイクモード、タイムラインエクスポートを備え、ローカル ComfyUI を駆動するオープンソースの AI 映画制作ワークステーションです。
このプロジェクトは、アトランタに拠点を置くバーチャルプロダクションスペシャリストであり、SCAD で LED ボリュームステージを管理しているカメラ部門のベテランである Nathan McConnell 氏によって作られました。最初のバージョンは機能リストの多さにより崩壊したため、バージョン 2 は一つの目標を中心にゼロから再構築されました:それはキッチンスクールのダッシュボードではなく、実際の映画制作ワークフローに従うクリーンなインターフェースです。
ComfyUI との連携方法
AI Movie Studio 2 はそれ自体では何も生成しません。既存のセットアップの上にあるディレクターのコックピットのようなものです:Next.js 14 フロントエンドが FastAPI バックエンドと通信し、バックエンドの「Driver System」は指定されたエンジンに合わせて適応します。ローカルでは 127.0.0.1:8188 の ComfyUI インスタンスを指し、クラウドでは API キーを持つ Fal.ai または Replicate を指します。UI は変更されません。
ComfyUI でサポートされているローカル動画モデルは、LTX Video 2.3、Wan Video(Kijai の WanVideoWrapper を経由)、および MiniMax H3(Kijai の MiniMax ノードを介して)で、テキストから動画へ、画像から動画へ、および最初と最後のフレームからのワークフローをカバーしています。画像側では、Z-Image、Qwen Image、Flux 2、Krea 2 を駆動し、ショット間でのキャラクターと場所の一貫性を保つためのマルチリファレンスサポートがあります。
ワークフロー機能
- 3D ストーリーボード: 3D 空間に仮想カメラを配置し、視野角 (FOV) とコンパスインジケーターで視覚的にショットを構成し、180 度ルールを破った場合に警告を受け取ります。
- 連続性システム: リファレンス画像により、フレーム間でキャラクターと場所の一貫性が保たれます。
- ロングテイクモード(実験的): 単一のクリップよりも長い連続ショットのために複数のセグメントにわたってキーフレーム補間をチェーンし、ffmpeg で結合します。LTX Video 2.3 や Wan Video など、最初と最後のフレームから動画へのサポートが必要となるモデルが必要です。
- どこでも LoRA サポート: すべての 5 つの生成面で、モデルごとの強度スライダー付きで LoRA をアップロードして適用できます。
- カスタムワークフロー登録: ComfyUI でワークフローを構築し、JSON をエクスポートして設定パネルにアップロードすると、すべてのドロップダウンで新しいモデルとして表示されます。アプリは JSON を解析し、すべての必須チェックポイント、LoRA、VAE をリストアップし、ComfyUI モデルフォルダーにすでに存在するものをフラグ付けします。
- タイムラインエクスポート: セリフと音声でショットを組み立て、その後 Premiere や DaVinci 用の XML をエクスポートします。
コミュニティの反響
9 月 7 日の r/comfyui での更新投稿には、実際の使用状況を報告する独立ユーザーが集まりました:1 人は Linux 上の Strix Halo ミニ PC で実行しており、もう 1 人は PR がプロジェクトにマージされました。Docker パス(docker compose up --build)により、以前のバージョンからの最大のセットアップの障壁が取り除かれました。
最小ハードウェア要件は、画像生成と短いクリップ用に 8 GB GPU です;12-16 GB であれば、すべてのローカル画像モデルに加え、Wan および MiniMax H3 動画をカバーします。GPU は必須ではありません。クラウドドライバーはそれなしで動作するためです。
利用状況
AI Movie Studio 2 は AGPL-3.0 ライセンスで、Python 3.10+ および Node.js 18+ で動作します。セットアップガイド、Docker のワンライナー、および完全なモデル互換性テーブルは GitHub README にあります。プロジェクトは活発に開発されており、作者はアップデート間の破壊的変更を予想しておくよう注意しています。
コメント
GitHubでサインインしてディスカッションに参加しましょう。