ComfyUI H3 Motion Context MultiRef 업데이트 6: 뮤직 비디오 및 AV 워크플로

H3 Motion Context MultiRef가 8월 17일에 업데이트 6을 출시했습니다. ComfyUI-H3-Motion-Context의 포크인 이 프로젝트는 뮤직 비디오와 AV 확장 두 장편 워크플로를 checkpoint 없는 직접 latent 체인으로 재구축하여, 최종 결과물을 VideoHelperSuite로 곧바로 스트리밍합니다. 이를 통해 기존 장편 H3 그래프에서 필요했던 대용량 전체 영화 RAM 할당을 제거했습니다.

번들로 제공되는 뮤직 비디오 데모: 하나의 마스터 곡을 중심으로 두 개의 참조 이미지에서 생성된 6개의 클립.

업데이트 6의 변경 사항

• Checkpoint 없는 직접 latent 체인. 이제 두 장편 워크플로 모두 각 sampler의 비디오 latent 꼬리(tail)를 다음 마스크 컨텍스트 노드로 곧바로 전달합니다. 업데이트 5의 디스크 checkpoint 노드는 더 이상 등록되지 않습니다.
• 직접 스트리밍 출력. 새로운 최종 출력 노드는 완전한 최종 IMAGE tensor를 메모리에 생성하는 대신 클립을 하나씩 디코딩하고 완료된 프레임을 VideoHelperSuite로 스트리밍합니다. 이로써 고RAM을 사용하던 기존 경로는 더 이상 노출되지 않습니다.
• 정확한 AV 타이밍. 최종 오디오 스티칭은 절대 타임라인 샘플 경계를 사용하여 44.1kHz와 같은 샘플 레이트에서 1샘플 이음새 어긋남(seam drift)을 방지합니다. 작은 H3 오디오 그리드 미달(undershoot) 구간은 무음 꼬리로 패딩하는 대신 시간 정합 방식으로 보정됩니다.
• 컨트롤러 기반 bypass(실행 건너뛰기). 생성 및 미리보기 그룹에 실제 ComfyUI bypass 모드를 사용하므로, 현재 두 워크플로 모두 그룹 제어를 위해 rgthree가 필요하지 않습니다.
• 향후 호환성. ComfyUI PR #15375 이전 및 이후의 H3 마스크 통합 레이아웃을 모두 인식하며, 현재 레이아웃이 감지되면 로컬 폴백(fallback)은 자동으로 비활성화됩니다.

뮤직 비디오

20슬롯 뮤직 비디오 워크플로는 하나의 곡을 중심으로 멀티클립 비디오를 구성합니다. 시작 클립은 MiniMaxH3ReferenceToVideo로 생성되며, 이후 각 클립은 자신의 비디오 latent 꼬리(tail)를 다음 클립에 직접 전달합니다. 마스터 곡은 항상 기준으로 유지됩니다: 모든 클립은 오디오 마스크 0과 함께 H3 오디오 latent에 정확한 절대 마스터 곡 슬라이스를 수신하며, 최종 출력은 원본 마스터 웨이브폼을 그대로 사용합니다.

AV 확장

AV 확장 워크플로는 하나의 비디오를 여러 H3 생성에 걸쳐 이어서 제작합니다. 하나의 컨트롤러가 기존 비디오, T2V, I2V/커스텀 키프레임 시작을 위한 공유 라이브 체인을 구동하며, 두 개의 이미지 참조 슬롯과 두 개의 선택적 오디오 참조가 시작 클립과 모든 확장 프로그램에 입력을 제공합니다. 보호된 컨텍스트는 공유 H3 비디오/오디오 경계(39 / 90 / 141 / 192…)에 맞춰지며, 오디오는 하드 보존 영역과 설정 가능한 하프코사인 페더(feather, 기본값 8 오디오 latent 틱, 0.2초)를 유지합니다. 결과물은 전체 최종 영화 tensor를 할당하지 않고 VideoHelperSuite로 스트리밍됩니다.

예시 참조 자료

뮤직 비디오 데모에는 example_workflows/assets/에 두 개의 참조 이미지와 곡 하나가 포함되어 있습니다.

참조 이미지 1	참조 이미지 2

설치

ComfyUI/custom_nodes/에 복제하여 설치한 후 재시작하세요:

cd ComfyUI/custom_nodes
git clone https://github.com/seitanism/ComfyUI-H3-Motion-Context-MultiRef.git

포함된 일부 워크플로는 VideoHelperSuite, KJNodes 및 rgthree가 필요합니다. 누락된 노드 팩을 설치한 후 재시작하세요. 예시 뮤직 비디오 에셋(이미지 2개와 곡 1개)은 실행 전에 ComfyUI input/ 폴더에 넣어야 합니다. 업데이트 5의 checkpoint 노드는 더 이상 등록되지 않으므로, 해당 노드를 사용해 저장된 워크플로는 현재의 직접 latent 버전으로 마이그레이션해야 합니다.