MiniMax H3 Turbo Ref2V v0.1: 4-шаговый LoRA для видео по референсам
Lightx2v и ModelTC выпускают MiniMax H3 Turbo Ref2V v0.1: 4-шаговый LoRA для видео по референсам с готовыми для ComfyUI весами bf16.
13 августа команда Lightx2v и ModelTC выпустили Ref2V Turbo v0.1, версию для преобразования референса в видео из линейки LoRA MiniMax H3 Turbo. Вслед за релизом FL2V Turbo v1.0 от 11 августа новый checkpoint применяет ту же 4-шаговую дистилляцию к Ref2VA (преобразование референса в видео + аудио), позволяя управлять видео с помощью одного или нескольких референсных изображений вместо одного первого кадра.
Референс персонажа из тестовых ассетов Lightx2v Ref2V
Что входит в v0.1
| Модель | Задачи | Разрешение обучения | Сдвиги обучения (видео / аудио) | Шаги дистилляции (NFE) | Рекомендуемые шаги инференса |
|---|---|---|---|---|---|
| Ref2VA Turbo 4-step v0.1 | Ref2VA | 544p (смешанное соотношение сторон) | 12 / 3 | 4 | 4 |
Релиз v0.1 состоит из двух файлов на Hugging Face:
minimax_h3_ref2v_turbo_4step_v0.1_bf16.safetensorsдля Diffusersminimax_h3_ref2v_turbo_4step_v0.1_comfyui_bf16.safetensorsготов к использованию в ComfyUI, конвертация не требуется
Что касается политики изменения размера референсных изображений, проект рекомендует режим match, использовавшийся при обучении дистилляции: он подгоняет площадь референса в пикселях под целевой холст, сохраняя его соотношение сторон и никогда не увеличивая разрешение меньшего референса. Все три поддерживаемые политики сохраняют соотношение сторон референса и используют сетку разрешений H3 (размеры округляются до значений, кратных 32) без кадрирования содержимого референса.
Использование в ComfyUI
MiniMax H3 имеет встроенную поддержку ComfyUI, поэтому для LoRA не требуется пользовательская нода:
- Скачайте
minimax_h3_ref2v_turbo_4step_v0.1_comfyui_bf16.safetensorsв папкуComfyUI/models/loras/. - Загрузите базовый checkpoint MiniMax H3 в рабочем процессе Ref2V и примените LoRA между загрузчиком модели и сэмплером.
- Подключите одно или несколько референсных изображений через ветвь входа референса и выполните 4 шага сэмплинга.
Официальный шаблон рабочего процесса MiniMax H3 R2V станет хорошей отправной точкой. Проект также включает специальный пример графа, video_minimax_h3_ref2v_lightx2v_turbo.json, в котором по умолчанию используется checkpoint Ref2VA Turbo 4-step v0.1 с разрешением 960x544 (16:9, 0,5 Мп).
Доступность
- Веса: lightx2v/Minimax-h3-Turbo на Hugging Face (bf16, форматы Diffusers и ComfyUI)
- Код и рабочие процессы: ModelTC/Minimax-H3-Turbo на GitHub
- Официальный шаблон ComfyUI: video_minimax_h3_r2v в репозитории Comfy-Org/workflow_templates
Комментарии
Войдите через GitHub, чтобы участвовать в обсуждении.