ControlNet v1.1 for Stable Diffusion 1.5 및 2.0
Stable Diffusion 1.5와 Stable Diffusion 2.0의 모델은 호환됩니다. 이는 ControlNet v1.1의 모델 파일이 Stable Diffusion 2.0에서도 사용될 수 있음을 의미합니다.
이 문서는 ComfyUI-WIKI에 의해 정리된 SD1.5 / 2.0을 지원하는 다양한 유형의 ControlNet 모델을 모아놓은 것입니다.
ControlNet v1.1
대용량 모델 - lllyasviel 제공
제공자: lllyasviel
GitHub 저장소:https://github.com/lllyasviel/ControlNet-v1-1-nightly
Hugging Face 저장소:https://huggingface.co/lllyasviel/ControlNet-v1-1/tree/main
호환 가능한 Stable Diffusion 버전: stable diffusion v1.5,2.0
크기: 1.45 GB
파일 이름 | 크기 | 업데이트 시간 | 비고 | 다운로드 링크 |
---|---|---|---|---|
control_v11e_sd15_ip2p.pth | 1.45 GB | 2023년 5월 | 다운로드 링크 | |
control_v11e_sd15_shuffle.pth | 1.45 GB | 2023년 5월 | 다운로드 링크 | |
control_v11f1e_sd15_tile.pth | 1.45 GB | 2023년 5월 | 다운로드 링크 | |
control_v11f1p_sd15_depth.pth | 1.45 GB | 2023년 5월 | 다운로드 링크 | |
control_v11p_sd15_canny.pth | 1.45 GB | 2023년 5월 | 다운로드 링크 | |
control_v11p_sd15_inpaint.pth | 1.45 GB | 2023년 5월 | 다운로드 링크 | |
control_v11p_sd15_lineart.pth | 1.45 GB | 2023년 5월 | 다운로드 링크 | |
control_v11p_sd15_mlsd.pth | 1.45 GB | 2023년 5월 | 다운로드 링크 | |
control_v11p_sd15_normalbae.pth | 1.45 GB | 2023년 5월 | 다운로드 링크 | |
control_v11p_sd15_openpose.pth | 1.45 GB | 2023년 5월 | 다운로드 링크 | |
control_v11p_sd15_scribble.pth | 1.45 GB | 2023년 5월 | 다운로드 링크 | |
control_v11p_sd15_seg.pth | 1.45 GB | 2023년 5월 | 다운로드 링크 | |
control_v11p_sd15_softedge.pth | 1.45 GB | 2023년 5월 | 다운로드 링크 | |
control_v11p_sd15s2_lineart_anime.pth | 1.45 GB | 2023년 5월 | 다운로드 링크 |
중간 - Safetensors/FP16 중간 크기, comfyanonymous 제공
제공자: comfyanonymous
Hugging Face 저장소: https://huggingface.co/comfyanonymous/ControlNet-v1-1_fp16_safetensors/tree/main
크기: 723MB
참고: ComfyUI 저자의 Hugging Face 저장소에서 제공되며, ComfyUI에서 더 나은 사용자 경험을 제공하고 다른 UI와도 호환됩니다.
파일 이름 | 크기 | 업데이트 날짜 | 다운로드 링크 |
---|---|---|---|
control_v11e_sd15_ip2p_fp16.safetensors | 723 MB | 2023년 4월 | 다운로드 링크 |
control_v11e_sd15_shuffle_fp16.safetensors | 723 MB | 2023년 4월 | 다운로드 링크 |
control_v11f1e_sd15_tile_fp16.safetensors | 723 MB | 2023년 4월 | 다운로드 링크 |
control_v11f1p_sd15_depth_fp16.safetensors | 723 MB | 2023년 4월 | 다운로드 링크 |
control_v11p_sd15_canny_fp16.safetensors | 723 MB | 2023년 4월 | 다운로드 링크 |
control_v11p_sd15_inpaint_fp16.safetensors | 723 MB | 2023년 4월 | 다운로드 링크 |
control_v11p_sd15_lineart_fp16.safetensors | 723 MB | 2023년 4월 | 다운로드 링크 |
control_v11p_sd15_mlsd_fp16.safetensors | 723 MB | 2023년 4월 | 다운로드 링크 |
control_v11p_sd15_normalbae_fp16.safetensors | 723 MB | 2023년 4월 | 다운로드 링크 |
control_v11p_sd15_openpose_fp16.safetensors | 723 MB | 2023년 4월 | 다운로드 링크 |
control_v11p_sd15_scribble_fp16.safetensors | 723 MB | 2023년 4월 | 다운로드 링크 |
control_v11p_sd15_seg_fp16.safetensors | 723 MB | 2023년 4월 | 다운로드 링크 |
control_v11p_sd15_softedge_fp16.safetensors | 723 MB | 2023년 4월 | 다운로드 링크 |
control_v11p_sd15s2_lineart_anime_fp16.safetensors | 723 MB | 2023년 4월 | 다운로드 링크 |
control_v11u_sd15_tile_fp16.safetensors | 723 MB | 2023년 4월 | 다운로드 링크 |
Small - Control lora Safetensors/FP16 작은 용량, comfyanonymous 제공
제공자: comfyanonymous
Hugging Face 저장소: https://huggingface.co/comfyanonymous/ControlNet-v1-1_fp16_safetensors/tree/main
크기: 136MB
참고: ComfyUI 저자의 Hugging Face 저장소에서 제공되며, ComfyUI에서 더 나은 사용자 경험을 제공하고 다른 UI와도 호환됩니다.
파일 이름 | 크기 | 업데이트 날짜 | 다운로드 링크 |
---|---|---|---|
control_lora_rank128_v11e_sd15_ip2p_fp16.safetensors | 136 MB | 2023년 4월 | 다운로드 링크 |
control_lora_rank128_v11e_sd15_shuffle_fp16.safetensors | 136 MB | 2023년 4월 | 다운로드 링크 |
control_lora_rank128_v11f1e_sd15_tile_fp16.safetensors | 136 MB | 2023년 4월 | 다운로드 링크 |
control_lora_rank128_v11f1p_sd15_depth_fp16.safetensors | 136 MB | 2023년 4월 | 다운로드 링크 |
control_lora_rank128_v11p_sd15_canny_fp16.safetensors | 136 MB | 2023년 4월 | 다운로드 링크 |
control_lora_rank128_v11p_sd15_inpaint_fp16.safetensors | 136 MB | 2023년 4월 | 다운로드 링크 |
control_lora_rank128_v11p_sd15_lineart_fp16.safetensors | 136 MB | 2023년 4월 | 다운로드 링크 |
control_lora_rank128_v11p_sd15_mlsd_fp16.safetensors | 136 MB | 2023년 4월 | 다운로드 링크 |
control_lora_rank128_v11p_sd15_normalbae_fp16.safetensors | 136 MB | 2023년 4월 | 다운로드 링크 |
control_lora_rank128_v11p_sd15_openpose_fp16.safetensors | 136 MB | 2023년 4월 | 다운로드 링크 |
control_lora_rank128_v11p_sd15_scribble_fp16.safetensors | 136 MB | 2023년 4월 | 다운로드 링크 |
control_lora_rank128_v11p_sd15_seg_fp16.safetensors | 136 MB | 2023년 4월 | 다운로드 링크 |
control_lora_rank128_v11p_sd15_softedge_fp16.safetensors | 136 MB | 2023년 4월 | 다운로드 링크 |
control_lora_rank128_v11p_sd15s2_lineart_anime_fp16.safetensors | 136 MB | 2023년 4월 | 다운로드 링크 |
ControlNet for StableDiffusion 2.1 (스테이블 디퓨전 2.1을 위한 컨트롤넷)
제공자: thibaud
Hugging Face 저장소: https://huggingface.co/thibaud/controlnet-sd21
다음 파일 형식은 .safetensors
와 .ckpt
로 나뉩니다. 일반적으로 해당 모델만 사용하려면 .safetensors
파일을 다운로드하면 충분합니다.
파일 이름 | 크기 | 업데이트 날짜 | 비고 | 다운로드 링크 |
---|---|---|---|---|
control_v11p_sd21_ade20k.safetensors | 728 MB | 2023년 4월 | 다운로드 링크 | |
control_v11p_sd21_canny.ckpt | 9.59 GB | 2023년 4월 | 다운로드 링크 | |
control_v11p_sd21_canny.safetensors | 728 MB | 2023년 4월 | 다운로드 링크 | |
control_v11p_sd21_color.safetensors | 728 MB | 2023년 4월 | 다운로드 링크 | |
control_v11p_sd21_depth.ckpt | 9.59 GB | 2023년 4월 | 다운로드 링크 | |
control_v11p_sd21_depth.safetensors | 728 MB | 2023년 4월 | 다운로드 링크 | |
control_v11p_sd21_hed.ckpt | 9.59 GB | 2023년 4월 | 다운로드 링크 | |
control_v11p_sd21_hed.safetensors | 728 MB | 2023년 4월 | 다운로드 링크 | |
control_v11p_sd21_lineart.safetensors | 728 MB | 2023년 4월 | 다운로드 링크 | |
control_v11p_sd21_normalbae.safetensors | 728 MB | 2023년 4월 | 다운로드 링크 | |
control_v11p_sd21_openpose.ckpt | 9.59 GB | 2023년 4월 | 다운로드 링크 | |
control_v11p_sd21_openpose.safetensors | 728 MB | 2023년 4월 | 다운로드 링크 | |
control_v11p_sd21_openposev2.safetensors | 728 MB | 2023년 4월 | 다운로드 링크 | |
control_v11p_sd21_scribble.ckpt | 9.59 GB | 2023년 4월 | 다운로드 링크 | |
control_v11p_sd21_scribble.safetensors | 728 MB | 2023년 4월 | 다운로드 링크 | |
control_v11p_sd21_zoedepth.safetensors | 728 MB | 2023년 4월 | 다운로드 링크 |
ComfyUI에서 ControlNet 모델 사용 방법 (How to Use ControlNet Model in ComfyUI)
ControlNet 모델 사용법은 다음 기사에서 다룹니다:
다음 주제를 다룰 것입니다:
- ComfyUI에 ControlNet 모델 설치 방법
- ComfyUI에서 ControlNet 모델 호출 방법
- ComfyUI ControlNet 워크플로우 및 예제
- 여러 ControlNet 모델 사용 방법 등
ControlNet 1.1 모델 개요 (Overview of ControlNet 1.1 Model)
ControlNet 1.1은 ControlNet 1.0을 기반으로 업데이트되고 최적화된 버전으로, 동일한 아키텍처를 가지고 있습니다. 이전 모델을 모두 포함하며, 몇 가지 새로운 모델이 추가되어 총 14개가 되었습니다.
새로운 기능 및 개선 사항 ControlNet 1.1은 여러 새로운 기능과 개선 사항을 도입했습니다:
- 새로운 소프트 엣지: “SoftEdge_safe”라는 새로운 소프트 엣지 처리 방법이 추가되어 이미지 엣지의 자연스러움을 향상시킵니다.
- 전처리기 확장: Canny, Depth, inpaint 등 여러 새로운 전처리기가 추가되어 다양한 이미지 처리 작업에 사용할 수 있습니다.
- 견고성 및 품질 향상: 이 버전은 주로 모델의 견고성과 생성된 이미지의 품질을 강화합니다.
ControlNet 1.1의 응용 시나리오 (Application Scenarios for ControlNet 1.1)
ControlNet 1.1은 다양한 AI 그림 시나리오에 적용될 수 있으며, 다음과 같은 경우에 사용될 수 있습니다:
이미지 복원: inpaint 전처리기를 활용하여 손상되거나 누락된 이미지 부분을 채우고 복원합니다. 엣지 감지: Canny 전처리기를 사용하여 이미지에서 엣지 정보를 추출하고, 이를 다른 이미지 처리 작업에 활용합니다. 깊이 맵 생성: Depth 전처리기를 통해 이미지의 깊이 정보를 생성하여 보다 입체적인 시각 효과를 만듭니다.