Anima Control Pose Preview-2: ComfyUI를 위한 네이티브 포즈 제어

news

Anima Control Pose Preview-2는 Anima에 포즈 제어 이미지 생성을 제공하며, 네이티브 ComfyUI 커스텀 노드, 512/768/1024 다중 해상도 지원, 개선된 포즈 정확도를 제공합니다.

Anima v1.0 이미지 모델을 위한 새로운 포즈 제어 어댑터가 출시되었습니다. Anima Control Pose Preview-2는 스켈레톤 기반 포즈 조건화를 Anima에 도입하며, 네이티브 ComfyUI 커스텀 노드, 다중 해상도 지원, 그리고 크게 개선된 포즈 추종 정확도를 제공합니다.

기능

Anima Control Pose는 스켈레톤 포즈 맵을 기반으로 Anima 이미지 생성을 조건화하는 채널 연결(channel-concat) control-LoRA입니다. 참조 사진이 주어지면 ComfyUI 노드가 포즈를 감지하고 스켈레톤을 렌더링하며, 모델은 생성 중 이를 따라 정밀한 캐릭터 위치, 제스처, 바디 랭귀지 제어를 가능하게 합니다.

Preview-2는 Preview-1 대비 주요 업데이트입니다:

  • 다중 해상도 지원: 512, 768, 1024px (Preview-1은 512만 지원)
  • 더 큰 학습 코퍼스 — 더 깨끗한 해부학과 안정적인 포즈
  • 새로운 ComfyUI 노드 'Anima Pose Control' — 여러 스켈레톤 렌더링 스타일(얇음, 두꺼움, 인형, 히트맵, 손/얼굴 포함/미포함)로 참조 사진에서 포즈 자동 감지
  • Body-PCK@0.1: 1024 해상도에서 약 0.83 (Preview-1의 512에서 약 0.59와 비교)

방법

제어 어댑터는 0으로 초기화된 ControlEmbedder를 사용하여 동결된 베이스 패치 임베드 출력에 추가되는 제어 토큰을 생성하고, 트랜스포머 블록에 rank-16 저순위 어댑터를 추가합니다. 베이스 Anima 모델, 텍스트 인코더, VAE는 동결 상태를 유지합니다.

strength = 0에서 어댑터는 정확히 베이스 모델과 동일하며, 제어 기여도는 학습 중 손실을 줄이는 경우에만 증가합니다.

설정
해상도512 + 768 + 1024, 종횡비 버켓팅
어댑터 순위16
제어 드롭아웃0.1
정밀도bf16

ComfyUI 사용법

이번 릴리스는 원활한 ComfyUI 경험을 위해 필요한 모든 것을 제공합니다:

  1. 설치: anima_pose_preview2.safetensorsComfyUI/models/loras/에 배치한 후, 두 커스텀 노드 폴더(anima_control_lora/ComfyUI-anima-pose-control/)를 ComfyUI/custom_nodes/에 복사합니다.
  2. 워크플로: 4개의 포함된 .json 워크플로 — 데모(제어 vs 제어 없음 나란히), 단순, 편집, 비교(모든 스켈레톤 스타일에 하나의 포즈)
  3. 포즈 감지: Anima Pose Control 노드는 처음 사용 시 DWPose ONNX 모델(~316 MB)을 자동 다운로드하며, 캐싱 후 오프라인에서도 작동합니다.

이용 가능 정보

Anima Control Pose Preview-2는 비상업적 라이선스로 Hugging Face에서 이용 가능합니다:

  • HF 저장소: czxkck/Anima-Control-Pose
  • 메인 파일: anima_pose_preview2.safetensors (ComfyUI/models/loras/에 배치)
  • 커스텀 노드: 저장소의 comfyui/ 아래 포함
  • 베이스 모델: Circlestone Labs의 Anima v1.0 (필수)

작성자는 Preview-2가 여전히 실험적이라고 언급합니다. 크게 개선되었지만 여전히 포즈를 놓치거나 복잡한 포즈에서 아티팩트를 생성할 수 있습니다. 더 나은 스켈레톤 표현과 전용 애니메이션 포즈 감지기에 초점을 맞춘 Preview-3이 개발 중입니다.

댓글

GitHub로 로그인하고 토론에 참여하세요.

댓글을 불러오는 중…
Anima Control Pose Preview-2: ComfyUI를 위한 네이티브 포즈 제어 | ComfyUI Wiki