Skip to content
より良い ComfyUI ナレッジベースの構築を支援する サポーターになる
ニュース崑崙万維がSkyReels-A2をオープンソース化：商用グレードの動画生成フレームワーク
新着|

Hi3DGen: 法線橋渡しによる高忠実度3D形状生成の新フレームワーク

2025/04/07

崑崙万維がSkyReels-A2をオープンソース化：商用グレードの動画生成フレームワーク

2025年4月6日、崑崙万維は最新開発のSkyReels-A2モデルを正式にオープンソース化しました。これは商用シナリオを対象とした世界初の「要素から動画へ」（Elements-to-Video, E2V）生成フレームワークです。革新的なデュアルブランチアーキテクチャにより、このフレームワークは複数の参照画像を一貫性のある流動的な動画コンテンツに変換でき、AI動画生成技術が実験段階から実用的応用段階へと移行したことを示しています。

SkyReels-A2デモ

技術的ハイライト：デュアルブランチアーキテクチャが動画生成のボトルネックを突破

SkyReels-A2の中核的革新はそのユニークなデュアルブランチ特徴エンコーディングシステムにあります：

  • 空間特徴ブランチ：洗練されたVAEエンコーダーを使用して画像を処理し、キャラクター、オブジェクト、背景などの要素のテクスチャーや詳細情報を抽出することで、生成された動画内の各要素と参照画像間の高い一貫性を確保します。

  • 意味的特徴ブランチ：CLIPビジュアルエンコーダーとMLPプロジェクション層を活用して要素間の高レベルな意味的関連性を捉え、クロスアテンションメカニズムを通じて拡散モデルに統合し、シーンの論理的一貫性と動的連続性を確保します。

この設計は、従来の動画生成モデルが直面する複数要素の一貫性制御と複雑なシーン意味的調整における技術的課題を成功裏に解決し、生成される動画を多くのクローズドソース商用モデルよりも流動的でリアルにしています。

幅広い応用：Eコマースから映画制作まで総合的な力を提供

SkyReels-A2は複数の領域で強力な応用可能性を示しています：

  • バーチャルEコマース：ホスト画像と商品画像を入力するだけで動的なレコメンデーション動画を生成でき、従来の広告制作の高コストと長い製作サイクルの問題を解決します。

  • 映画制作：複数のキャラクターと背景の組み合わせをサポートし、災害映画の集団脱出シーンやドラマのキャラクター間インタラクションなど、映画レベルのインタラクティブシーンを生成できます。構図と照明効果はプロフェッショナルな基準に達しています。

  • 音楽マルチメディア：背景要素とリズムを組み合わせて音楽ビデオセグメントを生成し、独立系ミュージシャンに低コストの創作ツールを提供できます。

オープンソースエコシステム：業界技術の普及促進

このオープンソースリリースは崑崙万維のAI動画セクター戦略における重要なステップです。以前にリリースされたSkyReels-V1（ショートドラマ生成モデル）とSkyReels-A1（表情・アクション制御アルゴリズム）はすでに大規模な開発者エコシステムを蓄積しています。SkyReels-A2はさらに以下を提供します：

  • 効率的推論フレームワーク：単一のRTX 4090 GPUで80秒以内に544p動画を生成でき、マルチカード並列処理と低VRAM最適化をサポートしています。

  • 構造化データ処理パイプライン：動画アノテーションから要素セグメンテーション、トリプレットマッチングまでの全ワークフローがオープンソース化され、企業のアプリケーション導入障壁を大幅に低減しています。

モデル仕様と技術パラメータ

SkyReels-A2は異なるアプリケーションシナリオのニーズを満たすために複数のモデルバージョンを提供しています：

  • A2-Wan2.1-14B-Preview（リリース済み）：約81フレーム、480×832解像度の生成をサポート
  • A2-Wan2.1-14B（近日公開）：Previewバージョンと同じ動画パラメータを持つベースバージョン
  • A2-Wan2.1-14B-Infinity（近日公開）：720×1080の高解像度で無制限の長さの動画生成をサポート

このモデルは動画拡散トランスフォーマーアーキテクチャに基づき、革新的なデュアルブランチエンコーディングシステムを使用して参照画像の精密な制御を実現し、生成された動画内のオブジェクト、キャラクター、背景要素の高い一貫性を確保しています。

最近の開発計画

崑崙万維チームはSkyReels-A2の最近の開発計画を発表しました：

  • A2-Bench評価システムとリーダーボードの立ち上げ
  • 無制限の長さの動画生成をサポートするバージョンを含む完全なモデルシーケンスのリリース
  • RTX 4090 GPU向けの推論パフォーマンス最適化
  • ComfyUIサポートの統合により、ユーザーがグラフィカルインターフェイスを通じてモデルを使用しやすくする

業界への影響と将来の展望

SkyReels-A2のリリースはオープンソース動画生成モデルの商用グレード制御機能のギャップを埋め、従来の動画制作プロセスを変える可能性があります。業界専門家はこの技術がパーソナライズドコンテンツ制作とリアルタイムインタラクティブメディアの普及を加速すると考えています。例えば、リアルタイムモーションキャプチャと組み合わせたライブストリーミングEコマース動画の生成や、メタバースシナリオ向けの仮想環境の動的構築などが可能になります。

崑崙万維チームは、長時間動画の時間的一貫性と物理エンジンインタラクションにおけるモデルの機能を継続的に最適化し、3Dモデリングツールとの深い統合を探求していくと述べています。

関連リンク