Krea 2 OpenPose ControlNet LoRAとComfyUIワークフロー

ComfyUI Wikinews

Krea 2 Turbo向けの定番OpenPose ControlNet LoRA:DWPoseスケルトンマップを入力すると、モデルはポーズに追従し、プロンプトが外観を定義します。

コミュニティ開発者thedeoxen氏が、Krea 2 Turbo向けの定番ControlNetスタイルのポーズアダプターであるKrea 2 OpenPose ControlNet LoRAをリリースしました。コントロール画像としてOpenPose / DWPoseのスケルトンマップを入力すると、モデルは身体のポーズと構造に追従し、テキストプロンプトがアイデンティティ、服装、スタイル、シーンを定義します。

ポーズから結果への生成例1

公式サンプルセットによるポーズマップ(左)と生成結果(右)

機能概要

参照画像とポーズを融合させるモデルとは異なり、これはシンプルなポーズ用ControlNet LoRAです。入力画像はOpenPoseのコントロールマップとして扱われ、生成される被写体はそのスケルトンに整列します。外観、服装、ライティング、環境はすべてプロンプトから決まり、2枚目の参照画像は必要ありません。主に人間を対象にトレーニングされていますが、スタイライズドキャラクターにも対応します。

以下の各プレビューは、ComfyUIで生成された単一の合成画像です:ポーズ → 生成結果(左から右)。

ポーズから結果への生成例2ポーズから結果への生成例3
ポーズマップに追従するサイバーパンクキャラクターポーズに整列したスタイライズドキャラクター
ポーズから結果への生成例4
ポーズ駆動のアクションシーン

ComfyUIワークフロー

このモデルには、すぐに実行できるComfyUIワークフローが同梱されています。必要なカスタムノードパックは以下の2つです:

セットアップ手順

  1. OpenPose / DWPoseのスケルトンマップを抽出または読み込む(黒背景が最適)
  2. Krea 2 Ostris Editテキストエンコーダーにポーズマップを画像1として渡す
  3. キャラクターやシーンを説明する通常のテキストプロンプトを記述する
  4. Krea 2 TurboのU-NetにLoRAをロードする(推奨ウェイト:0.8〜1.0

サンプルワークフローでの推奨サンプラー設定は、約10ステップCFG約1.0euler + simpleサンプラーです。トリガーフレーズは不要で、ポーズはすべてコントロール画像から取得されます。

ヒント

  • コントロール入力には黒背景DWPoseスケルトンマップが最適です
  • 希望するシーンに合わせて、ポーズマップ内の被写体のスケールとフレーミングを適切に保ちましょう
  • ポーズが硬すぎる場合はLoRAのウェイトを下げ(約0.6〜0.8)、より強く追従させたい場合は1.0に近づけましょう
  • ライティング、カメラアングル、スタイルを指定する詳細なプロンプトと組み合わせましょう

ユースケース

  • イラスト、漫画、ストーリーボード用のキャラクターポージング
  • プロンプトで服装やスタイルを自由に変更しながら、特定の身体ポーズを強制する
  • アニメーションのキーフレームやポーズ駆動のコンセプトアート
  • 解剖学的構造を制御できるスタイライズドキャラクターの生成

コメント

GitHubでサインインしてディスカッションに参加しましょう。

コメントを読み込み中…
Krea 2 OpenPose ControlNet LoRAとComfyUIワークフロー | ComfyUI Wiki