SCAIL-2: сквозная анимация персонажей с нативной поддержкой ComfyUI

ComfyUI Wikinews

zai-org от Zhipu выпускает SCAIL-2: сквозная анимация персонажей с официальной поддержкой ComfyUI, включая замену между идентичностями и DPO LoRA.

SCAIL-2 (HuggingFace | GitHub | Страница проекта) это открытая модель анимации персонажей от Zhipu AI: она анимирует эталонного персонажа с помощью управляющего видео сквозным образом, без промежуточных представлений позы и поставляется с официальной нативной поддержкой ComfyUI, встроенной в ядро ComfyUI.

Обзор

SCAIL-2 построена на архитектуре WAN2.1 14B и устраняет зависимость от промежуточных представлений, таких как карты скелета или маски инпейтинга, на которые опирались более ранние модели анимации персонажей. Команда синтезировала 60K пар движений из готовых моделей (SCAIL-Preview, Wan-Animate, MoCha) и провела обучение через Unified Motion Transfer Interface с выделенными каналами маскирования и конструкцией RoPE.

Тизер SCAIL-2

Сквозная анимация персонажей SCAIL-2 с заменой между идентичностями и мультиперсонажными сценариями (источник: страница проекта)

Методика обучения с обратным управлением позволяет модели получать возможности, выходящие за пределы её моделей-учителей, что даёт эмерджентные способности:

  • Замена персонажа между идентичностями: анимируйте другого персонажа тем же управляющим движением
  • Сценарии с животными в качестве источника движения: управляйте персонажем с помощью движений животных
  • Расширенное управление zero-shot: поддержка промежуточных средств управления, например рендеринга сетки SAM3D-Body, без дополнительного обучения

Поддержка ComfyUI (нативная)

SCAIL-2 интегрирована напрямую в ядро ComfyUI: первоначальный PR с поддержкой (Comfy-Org/ComfyUI #14373) был объединён в день релиза, а поддержка нескольких референсов появилась в PR #14509. Пользовательский пакет узлов не требуется.

Переупакованные веса Comfy-Org предоставляют готовые к использованию диффузионные модели в fp16, FP8, INT8, MXFP8 и смешанной точности NVFP4/MXFP8, а также Bias-Aware DPO LoRA (исправляет искажения рук, улучшает синхронизацию губ и глаз) и Relighting LoRA (вписывает заменённых персонажей в целевое освещение).

Архитектура SCAIL-2

Сетевая архитектура SCAIL-2: Unified Motion Transfer Interface с каналами маскирования и RoPE (источник: страница проекта)

Демонстрационные видео

Примеры из тизера SCAIL-2 (видео со страницы проекта)

Сравнение анимации с одним референсом (видео со страницы проекта)

Рабочий процесс

Пример рабочего процесса SCAIL-2 из ComfyUI-WanVideoWrapper от Kijai является хорошей отправной точкой:

Для режима с несколькими референсами также доступен официальный тестовый рабочий процесс из интеграционного PR Comfy-Org:

Ключевые детали

ПараметрДетали
РазрешенияСквозное управление: 512p и 704p; управление по позе показывает лучшие результаты при 704p
ОграниченияH и W должны делиться на 32 (например, 704x1280)
Встроенные модулиWan VAE и T5 интегрированы в checkpoint
ДополнительноBias-Aware DPO LoRA, Relighting LoRA, код обучения (2026-08-06)

Ссылки

Комментарии

Войдите через GitHub, чтобы участвовать в обсуждении.

Загрузка комментариев…
SCAIL-2: сквозная анимация персонажей с нативной поддержкой ComfyUI | ComfyUI Wiki