Apply RifleXRoPE WanVideo(ApplyRifleXRoPE_WanVideo)
В технической реализации этот узел клонирует входную диффузионную модель и вычисляет количество кадров на основе предоставленного латентного сэмпла.
Apply Rifle X Ro PE Wan Video
Узел Apply RifleXRoPE WanVideo клонирует входную диффузионную модель и вычисляет количество кадров на основе предоставленного латентного сэмпла.
Узел Apply RifleXRoPE WanVideo является экспериментальным узлом, предназначенным для расширения возможного количества кадров HunyuanVideo с использованием метода RIFLEx (https://github.com/thu-ml/RIFLEx). Его основная функция заключается в модификации ротационного позиционного кодирования (RoPE) модели с применением метода RIFLEx для поддержки генерации более длинных видео-последовательностей.
Функциональность узла
В технической реализации этот узел клонирует входную диффузионную модель и вычисляет количество кадров на основе предоставленного латентного сэмпла. Он использует указанный индекс внутренней частоты (k) и размерность модели для создания пользовательского позиционного энкодера с именем EmbedND_RifleX, который затем применяется в качестве патча внутри модели, изменяя способ её восприятия временного измерения.
Описание параметров узла - Apply RifleXRoPE WanVideo
Входные соединения (Inputs)
| Название параметра | Тип данных | Обязательный | Значение по умолчанию | Диапазон значений/Опции | Описание |
|---|---|---|---|---|---|
model | MODEL | Да | - | - | model (входной параметр): Исходная диффузионная модель, требующая обработки. Узел будет вносить изменения на основе этой модели. |
latent | LATENT | Да | - | - | Используется только для получения количества латентных кадров. |
Параметры управления (Parameters)
| Название параметра | Тип данных | Обязательный | Значение по умолчанию | Диапазон значений/Опции | Описание |
|---|---|---|---|---|---|
k | INT | Да | 6 | 1 - 100 (шаг: 1) | Индекс внутренней частоты |
Выходные данные (Output)
| Название параметра | Тип данных | Описание |
|---|---|---|
| MODEL | MODEL | MODEL (выходной параметр): Новый экземпляр модели, модифицированный с помощью RoPE, для последующей генерации видео. |
Сценарии использования
В практическом применении этот узел обычно встраивается в рабочий процесс, основанный на модели HunyuanVideo или других моделях генерации видео. Пользователь может загрузить базовую модель, подключить латентный сэмпл, содержащий информацию о целевом количестве кадров, настроить значение k для оптимизации связности и качества генерации длинных видео, а затем передать обработанную модель последующим узлам сэмплирования или генерации.
Важные замечания
Поскольку это экспериментальный узел, его стабильность и совместимость со всеми рабочими процессами ещё не полностью проверены. При использовании следует учитывать возможность непредсказуемого влияния на результаты генерации. Рекомендуется предварительно оценивать его работу в тестовой среде.
Ссылка на исходный код узла Apply RifleXRoPE WanVideo
Узел Apply RifleXRoPE WanVideo взят из пакета узлов ComfyUI-KJNodes.
Комментарии
Войдите через GitHub, чтобы участвовать в обсуждении.