노이즈 잠재 조합 예제 (Noisy Latent Composition Examples)

이 이미지를 ComfyUI에서 로드하여 전체 workflow를 확인할 수 있습니다.

여기서는 노이즈 잠재 조합의 예제를 제공합니다. 노이즈 잠재 조합은 이미지가 완전히 디노이즈되기 전에 여전히 노이즈가 있는 상태에서 잠재 이미지들이 함께 합성되는 것을 의미합니다. 일반적인 형태, 예를 들어 포즈나 주제는 첫 샘플링 단계에서 디노이즈되기 때문에, 특정 포즈를 가진 주제를 이미지의 어느 위치에나 배치하면서 높은 일관성을 유지할 수 있습니다.

다음은 예제입니다. 이 예제는 4개의 이미지를 함께 합성한 것입니다. 1개의 배경 이미지와 3개의 주제가 포함되어 있습니다. 총 단계는 16입니다. 각기 다른 프롬프트로 4단계 동안 잠재 이미지가 샘플링됩니다. 배경은 1920x1088이고, 각 주제는 384x768입니다. 이 4단계 후에도 이미지는 여전히 매우 노이즈가 많습니다. 그런 다음 주제들은 약간의 페더링을 적용하여 배경에 합성(붙여넣기)됩니다. 나머지 샘플링 단계는 이 합성된 이미지에서 실행됩니다.

이 예제들은 WD1.5 베타 3 일루전 모델로 수행되었습니다.

주제의 위치를 변경한 경우:

다른 노이즈 잠재 이미지에서 합성된 주제들이 실제로 서로 상호작용하는 것을 볼 수 있습니다. 이는 프롬프트에 “손을 잡고 있는”이라는 내용을 넣었기 때문입니다. 또한 배경이 얼마나 일관성 있는지를 확인할 수 있으며, 이는 이 방법의 강력함을 보여줍니다.

이 기술은 예를 들어 눈 색깔과 같은 주제의 세부 사항을 제어할 수 없다는 제한이 있지만, 주제의 위치, 포즈 및 일반적인 색상에 대해서는 매우 잘 작동하는 것 같습니다.