LoRA FaceSwap для MiniMax H3 заменяет актёра в любом референсном видео

ComfyUI Wikinews

FaceSwap LoRA от UntMods для MiniMax H3 Ref2VA подменяет личность в референсном видео на лицо с вашего референсного изображения, а в комплекте идёт готовый рабочий процесс ComfyUI.

FaceSwap_MiniMaxH3_REF2VA это LoRA для MiniMax H3 Ref2VA, которая подменяет личность в референсном видео на лицо с вашего референсного изображения. Опубликованная 15 сентября автором обучения, стоящим за пакетом CRT-Nodes, она поставляется с рабочим процессом ComfyUI, одним триггерным словом и единственным файлом весов на 63 МБ.
Контрольное изображение и кадр результата с заменой

Слева: контрольное изображение, задающее новую личность. Справа: кадр из выходного клипа, сгенерированного с его помощью.

Что меняет LoRA

Замена лица в MiniMax H3 обычно означает принудительное отклонение всего стека референсных изображений от его обученного поведения: вариант ref2va уже принимает референсные изображения, но использует их для управления внешним видом, одеждой и сценой, а не для перезаписи актёра. Этот адаптер сужает задачу до лица. Вы подаёте клип, который хотите сохранить, и одно или несколько референсных изображений новой личности, а одно триггерное слово Faceswap сообщает сэмплеру, когда применять замену.

Практические детали из карточки модели:

  • Обучена для ref2va. Применяется поверх весов reference-to-video-and-audio H3, а не поверх ветки fl2va.
  • Одно триггерное слово, Faceswap, с силой 1.0.
  • Обрезанный адаптер. Блоки ниже порога, заданного автором, удалены из файла safetensors: это удерживает размер загрузки на уровне 63 МБ и, по словам автора, означает «меньше артефактов LoRA, идентичная сила как у обученной базы».
  • Допускается несколько референсов. Поставляемый рабочий процесс содержит три загрузчика референсных изображений и отмечает, что нода «работает с одним или несколькими Refs Images».
Контрольное изображение, референсное видео и результат замены

Опубликованные демо-клипы представляют собой трёхпанельные сравнения со вшитыми подписями: контрольное изображение слева, референсное видео в центре, результат замены справа.

Запуск в ComfyUI

Репозиторий содержит SS_FaceSwap_MiniMax REF2V.json, рабочий процесс в формате фронтенда, построенный на собственном пакете узлов автора CRT-Nodes плюс ComfyUI-VideoHelperSuite для загрузки и муксинга видео:

  1. Установите CRT-Nodes (доступен в ComfyUI Manager как CRT-Nodes) и ComfyUI-VideoHelperSuite, затем перезапустите ComfyUI.
  2. Скачайте SS_FaceSwap_MiniMax_H3_REF2VA.safetensors из репозитория модели в ComfyUI/models/loras/MiniMaxH3/SS_FaceSwap/: именно этот путь ожидает рабочий процесс.
  3. Откройте рабочий процесс, загрузите исходный клип в видео-загрузчик VHS, а новую личность в загрузчики референсных изображений, и укажите Faceswap в промпте.

В примере рабочего процесса LoRA подключена через LoraLoaderModelOnly с силой 1.0 рядом со вторым слотом, в котором находится 8-шаговая turbo LoRA Ref2VA, поэтому демо-клипы рендерятся с ускоренным числом шагов. В качестве сэмплера используется CRT MiniMaxH3UnifiedSampler в режиме R2V с пресетом пакета «Balanced (recommended)»; сравнения, опубликованные вместе с моделью, помечены как 0.7 strength. Слоты checkpoint, текстового энкодера и VAE указывают на обрезанную int8 convrot базу ref2va, nvfp4 текстовый энкодер Qwen3-VL 32B и отдельные int8 видео-VAE и fp32 аудио-VAE от H3.

Триггерное слово это лишь половина условия: адаптер обучен брать личность из референсных изображений, поэтому собственный субъект клипа сохраняет движение, тайминг, кадрирование и аудио, а лицо при этом заменяется.

Примеры из карточки модели

Переносимая личность не обязана быть человеческой. Во втором опубликованном сравнении лицо даёт чёрный кот, и результат оказывается на ведущем из исходного клипа:

Личность кота перенесена на студийного ведущего

Контрольное изображение слева, референсное видео в центре, результат справа.

Контрольное изображение, референсное видео и результат при силе 0.7, аудио сохранено из исходного клипа.

Тот же пайплайн, применённый для переноса личности кота на студийного ведущего.

Доступность

Ссылка была опубликована в канале Banodoco #minimax_h3_chatter 19 сентября, и карточка модели набрала более 55 лайков за первые дни. Опубликованные демо это собственные клипы автора обучения; на момент написания результаты независимых тестов не появились.

Комментарии

Войдите через GitHub, чтобы участвовать в обсуждении.

Загрузка комментариев…
LoRA FaceSwap для MiniMax H3 заменяет актёра в любом референсном видео | ComfyUI Wiki