Fizgig v6 RefMods: референсы персонажей для MiniMax H3 без обучения

ComfyUI Wikinews

Fizgig v6.0 создаёт RefMods для MiniMax H3: референсные фото упакованы в один небольшой файл, настроенный на самой модели, с предпросмотром в RefMod Studio до ComfyUI.

Fizgig v6.0 вышел вчера с новой возможностью поверх своего тренера LoRA и тонкой настройки: RefMods для MiniMax H3. RefMod упаковывает папку референсных фото или клипов в один небольшой файл, который узлы ComfyUI-MiniMaxH3Mod загружают как LoRA и подают в референсный путь H3. Никакого прогона обучения, файл за минуты, а базовому варианту не нужны подписи.

Пример идентичности MiniMax H3Mod

RefMod идентичности, сгенерированный в ComfyUI через узлы MiniMaxH3Mod, из галереи примеров проекта.

Что такое RefMod

Сам формат RefMod происходит из пакета узлов сообщества ComfyUI-MiniMaxH3Mod от @Luisacaotica (199 звёзд), с библиотекой модов и руководством от @malcolmrey. Он сжимает референсные изображения и видео в крошечные латентные токены, которые едут по референсному пути H3, так что вместо вставки одних и тех же фото в слоты изображений при каждой генерации вы загружаете один файл. Fizgig v6 добавляет то, чего не было ни у кого другого: он умеет настраивать RefMod на самой H3, а не просто кодировать фото.

Что нового в Fizgig v6

  • Пять пресетов для людей и стилей: рецепт сообщества (простое кодирование 8 фото при 1 MP, идентичное тому, что делает штатный экстрактор пакета узлов), Fizgig recipe lite (16 фото при 0.5 MP, настроено на модели), Fizgig recipe (то же при 1 MP для более резкого результата), плюс пресеты стиля для внешнего вида, а не для людей.
  • Настройка с моделью в цикле: настроенные пресеты прогоняют файл против базовой H3 прямо во время создания, что, по словам автора, даёт лучшее обобщение на кадрах, которых не было на фото, а также более чистый и резкий вывод.
  • Вкладка RefMod Studio: сравнение A/B мода с базовой моделью прямо внутри Fizgig, ещё до того как вы откроете ComfyUI.
  • Клипы как моды движения и аудио: видеоклипы, подготовленные инструментом Гизмо из пакета, могут стать референсами движения, а аудио-мод может нести звук папки вместе с визуалом.
  • Совместимость без настройки: укажите выходную папку на models/refmods в ComfyUI один раз, и каждый мод загружается через существующие узлы MiniMaxH3Mod. Работает и для ref2va, и для fl2va рабочих процессов.

RefMods против LoRA

Формулировка самого автора в теме релиза: RefMods быстрые и небольшие, но они не могут знать о концепции столько же, сколько LoRA, и обобщают хуже. Компромисс в скорости: LoRA требует прогона обучения, RefMod готов за минуты, а для консистентности персонажа на кадрах, похожих на ваши референсы, разрыв в качестве невелик. Для максимального сходства и обобщения LoRA по-прежнему король, и Fizgig v6 сохраняет свой полный тренер LoRA для H3 и Krea 2 без изменений.

Как это получить

Fizgig v6.0.1 доступен на GitHub. В ComfyUI вам нужен пакет узлов MiniMaxH3Mod для загрузки файлов, а руководство автора RefMods: как мне...? проведёт вас через весь процесс от фото до загруженного мода.

Комментарии

Войдите через GitHub, чтобы участвовать в обсуждении.

Загрузка комментариев…
Fizgig v6 RefMods: референсы персонажей для MiniMax H3 без обучения | ComfyUI Wiki