Skip to content
설치3. 모델 설치3.6 VAE 설치

ComfyUI에서 VAE 모델 설치 방법

VAE 모델의 원리

VAE (Variational AutoEncoder)는 중요한 생성 모델 중 하나입니다. VAE를 매우 똑똑한 화가로 상상해보세요:

  1. Encoder: 먼저, 이 화가는 그림을 주의 깊게 관찰하고 주요 특징을 기억합니다. 이는 복잡한 그림을 단순한 주요 포인트로 압축하는 것과 같습니다.

  2. Latent Space: 화가가 기억한 이 주요 포인트들은 상상 공간을 형성합니다. 이 공간에서 화가는 이 특징들을 자유롭게 결합할 수 있습니다.

  3. Decoder: 그런 다음, 화가는 이 주요 포인트를 바탕으로 비슷하지만 동일하지 않은 그림을 다시 그릴 수 있습니다. 이는 단순한 주요 포인트를 복잡한 예술 작품으로 복원하는 것과 같습니다.

AI 그림 생성에서 VAE 모델의 역할은 모델이 이미지 세부 사항을 더 잘 이해하고 생성할 수 있도록 돕는 것입니다. 특히 복잡한 시각적 요소를 처리할 때 유용합니다.

VAE 모델의 기능

Stable Diffusion과 같은 AI 그림 생성 모델에서 VAE는 주로 다음과 같은 역할을 합니다:

  1. 이미지 압축 및 재구성: 입력 이미지를 잠재 공간으로 압축한 후 재구성하여 모델이 중요한 이미지 특징을 학습할 수 있도록 돕습니다.

  2. 이미지 품질 향상: 특히 얼굴 세부 사항, 조명 효과 등을 처리할 때 더 현실적이고 고품질의 이미지를 생성합니다.

  3. 스타일 일관성 유지: 생성된 이미지의 전체적인 스타일과 시각적 효과의 일관성을 유지하는 데 도움을 줍니다.

  4. 계산 복잡성 감소: 압축된 잠재 공간에서 작동함으로써 계산 복잡성을 줄일 수 있습니다.

VAE 모델을 어디서 다운로드할 수 있나요?

VAE 모델은 일반적으로 다음과 같은 출처에서 얻을 수 있습니다:

이러한 플랫폼에서 “VAE” 또는 “Stable Diffusion VAE”를 검색하여 적합한 모델을 찾을 수 있습니다. 예를 들어, Civitai에서는 모델 라이브러리에서 VAE에 대한 모델 유형을 필터링하여 해당 VAE 모델을 쉽게 찾을 수 있습니다. civitai_filters

VAE 모델을 설치하는 방법

VAE 모델 파일 다운로드

위의 출처에서 VAE 모델 파일을 다운로드하세요. 일반적으로 .pt 또는 .safetensors 확장자를 가집니다.

모델 파일 배치

다운로드한 VAE 모델 파일을 ComfyUI의 지정된 디렉토리에 배치하세요.

ComfyUI_windows_portable\ComfyUI\models\vae
💡

더 나은 모델 관리를 위해 vae 디렉토리에 하위 폴더를 생성하고 VAE 모델 파일을 대규모 모델 버전 또는 다른 분류 방법으로 정리하는 것이 좋습니다. 이는 Stable Diffusion 모델의 다양한 버전 및 Flux 드로잉 모델과 같은 다양한 유형의 드로잉 모델에 대한 VAE 모델이 보편적으로 호환되지 않을 수 있기 때문입니다. 예를 들어:

ComfyUI_windows_portable\ComfyUI\models\vae\SD1.5\your_vae_model.safetensors

ComfyUI 재시작 또는 새로고침

모델 파일을 배치한 후, ComfyUI를 재시작하거나 웹 인터페이스를 새로고침하여 새로 추가된 VAE 모델이 올바르게 로드되었는지 확인하세요.

다른 AI 그림 소프트웨어와 모델 파일을 공유하는 경우, ComfyUI 설치에서 모델 공유에 대한 지침을 참조하여 VAE 모델 파일을 해당 폴더에 복사하거나 연결하세요.

ComfyUI에서 VAE 모델을 사용하는 방법

ComfyUI에서는 VAE 모델을 주로 다음 노드를 통해 사용합니다:

  • VAE Decode: 잠재 표현을 이미지로 디코딩하는 데 사용됩니다.
  • VAE Encode: 이미지를 잠재 표현으로 인코딩하는 데 사용됩니다.
  • Load VAE: 특정 VAE 모델을 로드하는 데 사용됩니다.

사용 단계:

  1. “Load VAE” 노드를 추가하고 사용하려는 VAE 모델을 선택합니다.
  2. “Load VAE” 노드를 VAE가 필요한 다른 노드(VAE Decode 또는 VAE Encode 등)와 연결합니다.
  3. 워크플로우 요구에 따라 다른 관련 노드를 구성합니다.
💡

일부 체크포인트 모델에는 기본 VAE가 포함되어 있을 수 있습니다. 사용자 정의 VAE를 사용하려면 워크플로우에서 선택한 VAE 모델을 명시적으로 로드하고 사용해야 합니다.

  • 관련 ComfyUI 노드:
VAE 관련 노드

추천 VAE 모델

다음은 일반적으로 사용되는 VAE 모델 추천입니다:

  1. vae-ft-mse-840000-ema-pruned: 다양한 Stable Diffusion 버전에 적합한 널리 사용되는 VAE 모델입니다. 다운로드 링크

  2. kl-f8-anime2: 애니메이션 스타일 이미지에 최적화된 VAE 모델입니다. 다운로드 링크

  3. sdxl_vae.safetensors: SDXL (Stable Diffusion XL)을 위해 특별히 설계된 VAE 모델입니다. 다운로드 링크

  4. orangemix.vae.pt: Anything V3 및 V4 모델에서 널리 사용되며, 애니메이션 스타일 이미지 생성에 적합한 VAE입니다. 다운로드 링크

  5. clearvae_v2.2.safetensors: 이미지 선명도를 향상시키기 위한 VAE 모델입니다. 다운로드 링크

다양한 VAE 모델을 시도하여 특정 용도에 가장 적합한 결과를 가져오는 모델을 찾을 수 있습니다. VAE의 선택은 최종 생성된 이미지의 품질과 스타일에 영향을 미칠 수 있으므로, 다양한 옵션을 실험하는 데 시간을 투자할 가치가 있습니다.

💡

일부 링크는 모델 파일을 다운로드하기 위해 Hugging Face나 Civitai와 같은 플랫폼에 로그인해야 할 수 있습니다. 또한, 이러한 모델을 사용할 때 관련 사용 라이선스 및 조건을 준수해야 합니다.