Repeat Latents ๐ฅ๐ ฅ๐ ๐ ข(RepeatLatents)
๊ธฐ์ ๊ตฌํ ๊ด์ ์์ ์ด ๋ ธ๋๋ `samples`์ ๊ฐ์ ํ ์(Tensor) ํค-๊ฐ ์์ ํฌํจํ๋ ํ์ค LATENT ๋์ ๋๋ฆฌ ์ ๋ ฅ์ ๋ฐ์ต๋๋ค.
Repeat Latents
Repeat Latents ๐ฅ๐
ฅ๐
๐
ข ๋
ธ๋๋ ๊ธฐ์ ์ ๊ตฌํ ๊ด์ ์์, samples์ ๊ฐ์ ํ
์(Tensor) ํค-๊ฐ์ ํฌํจํ๋ ํ์ค LATENT ๋์
๋๋ฆฌ ์
๋ ฅ์ ๋ฐ์ต๋๋ค.
Repeat Latents ๋ ธ๋๋ ์ ์ฌ ๊ณต๊ฐ(Latent) ๋ฐ์ดํฐ๋ฅผ ๋ณต์ ํ๊ณ ํ์ฅํ๋ ๋ฐ ์ฌ์ฉ๋๋ ๋๊ตฌ์ ๋๋ค. ํต์ฌ ๊ธฐ๋ฅ์ ์ผ๋ จ์ ์ ์ฌ ํํ(latent representation)์ ๋ฐ์ ๊ทธ ๋ด์ฉ์ ์ง์ ๋ ๋ฐฐ์๋งํผ ๋ฐ๋ณตํ์ฌ ์ฐ๊ฒฐํจ์ผ๋ก์จ ๋ ๊ธด ์ํ์ค๋ฅผ ์์ฑํ๋ ๊ฒ์ ๋๋ค. ์ด ์์ ์ ์ฃผ๋ก ์ ์ฌ ๋ฐ์ดํฐ์ ๋ฐฐ์น ์ฒ๋ฆฌ ๋๋ ์ํ์คํ๊ฐ ํ์ํ ์ํฌํ๋ก์ฐ์ ํ์ฉ๋ฉ๋๋ค.
๋ ธ๋ ๊ธฐ๋ฅ
๊ธฐ์ ์ ๊ตฌํ ๊ด์ ์์, ์ด ๋
ธ๋๋ samples์ ๊ฐ์ ํ
์(Tensor) ํค-๊ฐ์ ํฌํจํ๋ ํ์ค LATENT ๋์
๋๋ฆฌ ์
๋ ฅ์ ๋ฐ์ต๋๋ค. ๋
ธ๋๋ ๋์
๋๋ฆฌ ๋ด์์ ๋ฉ์ธ ์ํ ๊ธธ์ด์ ์ผ์นํ๋ ๋ชจ๋ 1์ฐจ์ ํ
์๋ฅผ ์ํํ๋ฉฐ, ์ด๋ฌํ ํ
์๋ค์ 0๋ฒ ์ฐจ์(๋ฐฐ์น ์ฐจ์)์ ๋ฐ๋ผ ๋ฐ๋ณตํ๊ณ ์ฐ๊ฒฐํฉ๋๋ค. ์ต์ข
์ ์ผ๋ก, ๊ธธ์ด๊ฐ ํ์ฅ๋ ์๋ก์ด LATENT ๋์
๋๋ฆฌ๋ฅผ ์ถ๋ ฅํ๊ณ , ๋์์ ์ฐ๊ฒฐ๋ ํ
์์ ์ด ๊ฐ์(์ฆ, ์๋ก์ด ๋ฐฐ์น ํฌ๊ธฐ)๋ฅผ ๋ฐํํฉ๋๋ค.
๋ ธ๋ ํ๋ผ๋ฏธํฐ ์ค๋ช - Repeat Latents ๐ฅ๐ ฅ๐ ๐ ข
์ฐ๊ฒฐ ์ ๋ ฅ (Inputs)
| ํ๋ผ๋ฏธํฐ ์ด๋ฆ | ๋ฐ์ดํฐ ํ์ | ํ์ | ๊ธฐ๋ณธ๊ฐ | ๋ฒ์/์ต์ | ์ค๋ช |
|---|---|---|---|---|---|
latents | LATENT | ์ | - | - | : ๋ฐ๋ณต๋ ์ ์ฌ ํํ ๋ฐ์ดํฐ๋ฅผ ์ ๋ ฅํฉ๋๋ค. LATENT ๋์ ๋๋ฆฌ ํ์ ์ ๋๋ค. |
์ปจํธ๋กค ํ๋ผ๋ฏธํฐ (Parameters)
| ํ๋ผ๋ฏธํฐ ์ด๋ฆ | ๋ฐ์ดํฐ ํ์ | ํ์ | ๊ธฐ๋ณธ๊ฐ | ๋ฒ์/์ต์ | ์ค๋ช |
|---|---|---|---|---|---|
multiply_by | INT | ์ | 1 | 1 - BIGMAX (์คํ : 1) | : ์ ๋ ฅ ๋ฐ์ดํฐ๋ฅผ ๋ช ๋ฐฐ๋ก ๋ฐ๋ณตํ ์ง ์ง์ ํฉ๋๋ค. ๋ฒ์๋ 1๋ถํฐ ๋งค์ฐ ํฐ ๊ฐ๊น์ง์ด๋ฉฐ, ์คํ ์ 1์ ๋๋ค. |
์ถ๋ ฅ (Output)
| ํ๋ผ๋ฏธํฐ ์ด๋ฆ | ๋ฐ์ดํฐ ํ์ | ์ค๋ช |
|---|---|---|
| LATENT | LATENT | : ๋ฐ๋ณต ๋ฐ ์ฐ๊ฒฐ๋ ์๋ก์ด ์ ์ฌ ํํ ๋ฐ์ดํฐ๋ฅผ ์ถ๋ ฅํฉ๋๋ค. |
| count | INT | : ์๋ก์ด ์ ์ฌ ๋ฐ์ดํฐ ๋ด ์ํ์ ์ด ๊ฐ์(๋ฐฐ์น ํฌ๊ธฐ)๋ฅผ ์ถ๋ ฅํฉ๋๋ค. |
์ฌ์ฉ ์๋๋ฆฌ์ค
๋น๋์ค ์์ฑ ๋๋ ์ด๋ฏธ์ง ๋ฐฐ์น ์ฒ๋ฆฌ ์ํฌํ๋ก์ฐ์์ ์ด ๋ ธ๋๋ ๋งค์ฐ ์ ์ฉํฉ๋๋ค. ์๋ฅผ ๋ค์ด, VAE ์ธ์ฝ๋์ ์ํด ์์ฑ๋ ๋จ์ผ ํ๋ ์ ์ด๋ฏธ์ง์ ์ ์ฌ ํํ์ด ์์ง๋ง, ๋์ผํ ๋ด์ฉ์ ์ฌ๋ฌ ํ๋ ์์ผ๋ก ๊ตฌ์ฑ๋ ์ ์ ๋น๋์ค๋ฅผ ์์ฑํด์ผ ํ ๊ฒฝ์ฐ, ์ด ๋ ธ๋๋ฅผ ์ฌ์ฉํ์ฌ ํด๋น ์ ์ฌ ํํ์ ์ฌ๋ฌ ๋ฒ ๋ฐ๋ณตํ ํ, ์ถ๋ ฅ์ ํ์ ์ํ๋ฌ์ ์ ๋ฌํ์ฌ ๋ฐฐ์น ๋์ฝ๋ฉ์ ์ํํจ์ผ๋ก์จ ์ํ์ค๋ฅผ ํจ์จ์ ์ผ๋ก ์์ฑํ ์ ์์ต๋๋ค.
์ฃผ์์ฌํญ
์ด ๋
ธ๋๋ LATENT ๋์
๋๋ฆฌ ๋ด์์ ๋ฉ์ธ ์ํ ๊ธธ์ด์ ์ผ์นํ๋ 1์ฐจ์ ํ
์์ ๋ํด์๋ง ๋ฐ๋ณต ์์
์ ์ํํฉ๋๋ค. multiply_by ํ๋ผ๋ฏธํฐ๋ 1 ์ด์์ ์ ์์ฌ์ผ ํ๋ฉฐ, ์ง๋์น๊ฒ ํฐ ๋ฐ๋ณต ๋ฐฐ์๋ GPU ๋ฉ๋ชจ๋ฆฌ ๋ถ์กฑ์ ์ด๋ํ ์ ์์ต๋๋ค.
Repeat Latents ๐ฅ๐ ฅ๐ ๐ ข ๋ ธ๋ ์์ค ์ฝ๋ ๋งํฌ
Repeat Latents ๐ฅ๐ ฅ๐ ๐ ข ๋ ธ๋๋ ComfyUI-VideoHelperSuite ๋ ธ๋ ํจํค์ง์์ ์ ๊ณต๋ฉ๋๋ค.
๋๊ธ
GitHub๋ก ๋ก๊ทธ์ธํ๊ณ ํ ๋ก ์ ์ฐธ์ฌํ์ธ์.