MiniMax H3 Prompt Builder 1.8.0: правка клипов с маской
ComfyUI Fantastic H3 Prompt Builder 1.8.0 добавляет правку клипов с маской через SAM 3.1, более быстрое кодирование RefMod и переработанный редактор обрезки.
Цепочка режима референса, поставляемая с набором: Media Loader → Prompt Builder → MiniMax H3 Reference to Video.
Редактирование клипов с маской
Версия 1.8.0 отвечает на вопрос, с которым постоянно сталкиваются пользователи H3: изменить в клипе одну вещь и не трогать остальные кадры. Маска определяет, где модель может что-либо изменить, а промпт определяет, чем станет эта область.
Кликните правой кнопкой по клипу в Media Loader и выберите Mask for editing, чтобы открыть вкладку маски, которая работает с клипом в его текущем обрезанном, кадрированном и отражённом виде. Маски строятся из слоёв, накладываемых как в графическом редакторе, при этом каждый новый слой может добавить свою область или вырезать её из слоёв под ним:
- Auto Mask with SAM создаёт маску по промпту и точке. Нажмите на цель на чётком кадре, кликните правой кнопкой по любому объекту, чтобы исключить его, и введите, что это («зелёная куртка»), чтобы маскировалась только эта часть под точками. Запуск на нескольких кадрах заново задаёт отслеживание на каждом отмеченном кадре: именно так исправляют «уползающую» маску.
- Слои Ellipse, Rectangle и Polygon рисуются вручную и задаются ключами: переместите или измените размер слоя на другом кадре, и он последует за объектом. Доступны интерполяция Smooth, Linear или Ease, а также ключ Hidden для объектов, покидающих кадр.
- Кисть рисует или стирает на одном кадре, от текущего места до конца или по всему клипу.
Use this mask объединяет слои на сохранённом диапазоне, сохраняет их вместе с клипом, чтобы они оставались редактируемыми, и карточка после этого показывает Video 1 · editing. На стороне графа RefMod Text Encode формирует правку, а новый узел Fantastic H3 Edit Composite вставляет именно перегенерированную область обратно в исходные кадры, поэтому всё за пределами маски остаётся таким, как было снято.
Для работы с маской нужен чекпойнт SAM 3.1, sam3.1_multiplex_fp16.safetensors, в models/checkpoints. Набор никогда не скачивает его автоматически.
Библиотека RefMod: создание, редактирование, упорядочивание и тегирование переиспользуемых референсных наборов.
Более быстрое кодирование RefMod
Теперь RefMod хранит изображения, которые подаются текстовому энкодеру, в собственном файле, поэтому энкодер больше не декодирует их при каждом запуске. Старые RefMod декодируются один раз и кэшируются, а действие Store encoder frames в библиотеке навсегда записывает кадры в старые файлы.
Новая экспериментальная настройка stack_pictures в Text Encode определяет, сколько изображений RefMod доходит до энкодера: каждое четвёртое (прежнее поведение), до восьми или все. Большее число кадров может помочь с идентичностью и смешиванием между несколькими RefMod, но ценой памяти и времени генерации.
Остальное в 1.8.0
Редактор обрезки и кадрирования, которым также вытаскивают кадр прямо из клипа в пул референсных изображений.
- В редакторе обрезки появились масштабирование таймлайна, индикатор того, насколько курсор воспроизведения ушёл за первый сохранённый кадр, предупреждение о несохранённых изменениях перед закрытием и Ctrl+Z, который больше не срабатывает на графе позади.
- Клик правой кнопкой по выделенному тексту в любом поле построителя теперь предлагает Copy, Cut, Paste и Remove вместе с «сохранить выделение как фразу».
- Clean up в Media Loader удаляет файлы масок, которые нигде не используются, и устаревшие сохранённые латенты, сохраняет маски, на которые ещё ссылаются сохранённые медианаборы и черновики, и предлагается сам, когда неиспользуемые маски превышают 500 МБ.
voice_description_at_labelзаписывает сохранённое описание каждого голосового RefMod сразу после его метки<Audio n>:.- Новые RefMod по умолчанию используют короткую сторону 768 px вместо 1024 px.
- Встроенное руководство получило часть E о редактировании с маской, а примечания к релизам из README переехали в отдельный
CHANGELOG.md.
Установка
Набору требуется ComfyUI 0.30.0 или новее и обычные чекпойнты H3: fl2va для работы с текстом и ключевыми кадрами, ref2va для режима референса. Декодирование видео и аудио идёт через PyAV, который уже есть в рабочей установке ComfyUI.
cd ComfyUI/custom_nodes
git clone https://github.com/Adudeguyman/ComfyUI-Fantastic-MiniMaxH3-PromptBuilderПосле этого полностью перезапустите ComfyUI, затем найдите MiniMax H3 в меню узлов. Набор также устанавливается через ComfyUI Manager по запросу «Fantastic H3 Prompt Builder».
Репозиторий: Adudeguyman/ComfyUI-Fantastic-MiniMaxH3-PromptBuilder
Руководство по RefMod: REFMODS.md
Список изменений: CHANGELOG.md
Базовая модель: Comfy-Org/MiniMax-H3
Комментарии
Войдите через GitHub, чтобы участвовать в обсуждении.