ノイジー潜在合成の例

これらの画像をComfyUIでロードして、完全なワークフローを取得できます。

ここではノイジー潜在合成の例を紹介します。ノイジー潜在合成とは、画像が完全にノイズ除去される前に、まだノイズが残っている状態で潜在を合成することです。一般的な形状、例えばポーズや被写体は最初のサンプリングステップでノイズ除去されるため、特定のポーズを持つ被写体を画像のどこにでも配置し、一貫性を保つことができます。

ここに例があります。この例では、4つの画像が合成されています。1つの背景画像と3つの被写体です。全体のステップ数は16です。潜在はそれぞれ異なるプロンプトで4ステップサンプリングされます。背景は1920x1088で、被写体はそれぞれ384x768です。これらの4ステップの後、画像はまだ非常にノイジーです。被写体は背景にフェザリングを適用して合成（貼り付け）されます。その後、この合成画像に対して残りのサンプリングステップが実行されます。

これらの例はWD1.5 beta 3 illusion modelで行われています。

被写体の位置を変更した場合:

異なるノイジー潜在画像から合成された被写体が実際に相互作用していることがわかります。これはプロンプトに「手をつないでいる」と入れたためです。また、背景がどれほど一貫しているかもわかります。これはこの手法の強力さを示しています。

この技術には、例えば目の色のような被写体の詳細を制御できないという制限がありますが、被写体の位置、ポーズ、一般的な色には非常にうまく機能するようです。