LTX Ripple: フレームを 1 枚編集して動画全体に波及させる

ComfyUI Wikinews

LTX Ripple は LTX-2.5 用の First Frame All Frames IC-LoRA です。最初のフレームを編集すると、その変更が動画全体に波及しますが、動きとタイミングはそのまま維持されます。

LTX Ripple (Hugging Face) は WepeNerd による LTX-2.5 用の 最初のフレーム全フレーム (FFAF) IC-LoRA です。画像エディタで動画の最初のフレームを編集すると、LoRA がその編集をクリップの残りの部分に伝播させながら、元の動き、タイミング、カメラ移動、および変更されていないコンテンツをそのまま維持します。

その仕組み

この pipeline は意図的にシンプルです:

  1. ソース動画を入力します。
  2. 最初のフレームを編集して置き換えます(任意の画像エディタで)。
  3. LTX Ripple がその編集を中心に動画の残りを再生成します。

変更の簡単な説明があると役立ちますが、LoRA はプロンプトなしでも動作できます。LTX-2.5 はすでにソース動画の動きを理解しているため、編集は「波紋」のように外側へ広がります:効果はカメラカットを通じてオブジェクトに付着したままになり、マテリアルはジオメトリの周りに正しく巻き付き、置換されたキャラクターは元のパフォーマンスに従い続けます。

できること

モデルカードでは、単一の編集された最初のフレームによって駆動される幅広いアプリケーションが示されています:

  • 特殊効果の追加(炎、液体、照明)
  • 3D モデルの再テクスチャリングおよびクレイレンダリングからのアーキビジョン テクスチャリング
  • スタイルの変更(アクター 1 人のスタイルのみを変更する場合を含む)
  • シーンが反応する光源と時間帯の変更
  • キャラクター属性の変更、衣装の交換、顔の交換
  • 背景と天候の変更
  • タイトルまたはロゴの置換
  • オブジェクトの追加、削除、置換
  • シャープ化またはブラー処理

最初のフレームに追加された液体は、元のガラスの動きに合わせて流れます:

ライティングと VFX の変化がカメラカットを通じて波紋状に広がります:

ComfyUI の使い方

推奨する強度設定は 1.35 です。編集が十分に反映されない場合は増加し、出力が本来同じであるべきコンテンツを変え始めたら減少してください。

デフォルトのワークフロー プロンプトは以下の通りです:

参照動画を使用して動き、タイミング、カメラ移動、構図、および変更されていないシーン コンテンツを提供しつつ、最初のフレームで確立された視覚的編集を動画全体に一貫して伝播させてください。

難しい編集の場合は、変更された最初のフレーム(新しいライト、オブジェクト、マテリアル、スタイル、または背景)の短い説明を追加して、モデルが一貫性を保つべき内容を理解できるようにします。

制限事項

最初のフレームは唯一の制御信号なので、雑な編集は雑な動画を生み出します。非常に大きな変更、重度のオクルージョン、高速な動き、またはソース動画に一度も現れないコンテンツは整合性を低下させます。結果はまた LTX-2.5 チェックポイント、解像度、フレーム数、および利用可能なハードウェアにも依存します。

リンク

コメント

GitHubでサインインしてディスカッションに参加しましょう。

コメントを読み込み中…
LTX Ripple: フレームを 1 枚編集して動画全体に波及させる | ComfyUI Wiki