IC-Light: ComfyUI용 이미지 재조명 모델

lllyasviel의 IC-Light

이미지 편집재조명오픈 소스

ControlNet 작성자인 lllyasviel의 이미지 재조명 모델 시리즈입니다. V1은 프롬프트로 조명을 다시 렌더링하는 세 개의 공개 SD 1.5 체크포인트로 제공되며, V2는 전경 조건화를 갖춘 FLUX 기반으로 전환되었고 공식 온라인 데모를 통해 사용할 수 있습니다.

Hugging Face (V1 가중치)GitHub V2 온라인 데모

개발자	lllyasviel
출시일	2024-05 (V1), 2024-10 (V2 미리보기)
아키텍처	SD 1.5 기반 (V1), FLUX 기반 (V2)
라이선스	OpenRAIL-M (V1 가중치), 비상업적 (V2)
기능	재조명, 전경 조건화, 배경 교체

개요

IC-Light는 사진의 내용은 그대로 두고 조명만 다시 설정합니다. 원하는 조명을 설명하는 텍스트 프롬프트(선택적으로 환경 맵 포함)를 입력하면, 모델이 장면을 다시 렌더링하여 피사체에 그 조명이 적용되도록 합니다. 전경 조건화 변형은 피사체 픽셀을 그대로 유지하고 조명만 이동시키므로, 출력 결과를 합성에 활용할 수 있습니다.

V1 체크포인트

V1은 SD 1.5를 기반으로 하며 세 가지 가중치를 제공합니다. 모두 Hugging Face에 있습니다:

체크포인트	조건화	비고
`iclight_sd15_fc.safetensors`	텍스트 + 전경	기본 모델이며, 초기 잠재 데이터로도 재조명을 유도할 수 있습니다
`iclight_sd15_fcon.safetensors`	텍스트 + 전경	`fc`와 동일하지만 오프셋 노이즈로 학습되었으며, 작성자의 사용자 평가에서 약간 더 낮은 성능을 보였습니다
`iclight_sd15_fbc.safetensors`	텍스트 + 전경 + 배경	배경도 조건화되므로 장면 전체가 프롬프트를 따릅니다

IC-Light V2

V2는 모델을 FLUX 기반으로 재구축하고 16채널 VAE와 네이티브 고해상도 처리를 추가하여, 유화나 애니메이션처럼 양식화된 입력에서도 디테일을 유지합니다. 현재까지는 전경 조건화 모델만 사용할 수 있으며, 공식 Hugging Face Space를 통해 제공됩니다. V2 가중치 자체는 공개되지 않았으므로 다운로드하거나 로컬에서 실행할 체크포인트가 없습니다. V2 출력은 비상업적 용도로만 라이선스가 부여됩니다.

ComfyUI 통합

V1의 경우 kijai/ComfyUI-IC-Light를 설치하면 IC-Light 노드와 예제 워크플로가 제공됩니다. 그런 다음 체크포인트를 models/checkpoints에 넣으세요. V2의 경우 IC-Light V2 튜토리얼에 설명된 온라인 데모가 워크플로입니다.

라이선스

V1 가중치는 CreativeML OpenRAIL-M에 따라 배포됩니다. 원본 V1 예제는 배경 제거에 BRIA RMBG 1.4를 사용하는데, 이는 비상업적 라이선스입니다. IC-Light를 상업적으로 사용한다면 BiRefNet 같은 것으로 교체하세요. IC-Light V2는 비상업적 용도로만 사용할 수 있습니다.

lllyasviel의 IC-Light

개요

V1 체크포인트

IC-Light V2

ComfyUI 통합

라이선스

댓글