SCAIL-2: сквозная анимация персонажей с нативной поддержкой ComfyUI
zai-org от Zhipu выпускает SCAIL-2: сквозная анимация персонажей с официальной поддержкой ComfyUI, включая замену между идентичностями и DPO LoRA.
Обзор
SCAIL-2 построена на архитектуре WAN2.1 14B и устраняет зависимость от промежуточных представлений, таких как карты скелета или маски инпейтинга, на которые опирались более ранние модели анимации персонажей. Команда синтезировала 60K пар движений из готовых моделей (SCAIL-Preview, Wan-Animate, MoCha) и провела обучение через Unified Motion Transfer Interface с выделенными каналами маскирования и конструкцией RoPE.
Сквозная анимация персонажей SCAIL-2 с заменой между идентичностями и мультиперсонажными сценариями (источник: страница проекта)
Методика обучения с обратным управлением позволяет модели получать возможности, выходящие за пределы её моделей-учителей, что даёт эмерджентные способности:
- Замена персонажа между идентичностями: анимируйте другого персонажа тем же управляющим движением
- Сценарии с животными в качестве источника движения: управляйте персонажем с помощью движений животных
- Расширенное управление zero-shot: поддержка промежуточных средств управления, например рендеринга сетки SAM3D-Body, без дополнительного обучения
Поддержка ComfyUI (нативная)
SCAIL-2 интегрирована напрямую в ядро ComfyUI: первоначальный PR с поддержкой (Comfy-Org/ComfyUI #14373) был объединён в день релиза, а поддержка нескольких референсов появилась в PR #14509. Пользовательский пакет узлов не требуется.
Переупакованные веса Comfy-Org предоставляют готовые к использованию диффузионные модели в fp16, FP8, INT8, MXFP8 и смешанной точности NVFP4/MXFP8, а также Bias-Aware DPO LoRA (исправляет искажения рук, улучшает синхронизацию губ и глаз) и Relighting LoRA (вписывает заменённых персонажей в целевое освещение).
Сетевая архитектура SCAIL-2: Unified Motion Transfer Interface с каналами маскирования и RoPE (источник: страница проекта)
Демонстрационные видео
Примеры из тизера SCAIL-2 (видео со страницы проекта)
Сравнение анимации с одним референсом (видео со страницы проекта)
Рабочий процесс
Пример рабочего процесса SCAIL-2 из ComfyUI-WanVideoWrapper от Kijai является хорошей отправной точкой:
Для режима с несколькими референсами также доступен официальный тестовый рабочий процесс из интеграционного PR Comfy-Org:
Ключевые детали
| Параметр | Детали |
|---|---|
| Разрешения | Сквозное управление: 512p и 704p; управление по позе показывает лучшие результаты при 704p |
| Ограничения | H и W должны делиться на 32 (например, 704x1280) |
| Встроенные модули | Wan VAE и T5 интегрированы в checkpoint |
| Дополнительно | Bias-Aware DPO LoRA, Relighting LoRA, код обучения (2026-08-06) |
Комментарии
Войдите через GitHub, чтобы участвовать в обсуждении.