Wan Image To Video SVIPro(WanImageToVideoSVIPro)

Узел Wan Image To Video SVIPro — его основная функция заключается в преобразовании одного или нескольких изображений (в качестве латентных сэмплов) во временные условия, подходящие для обработки видео-моделью.

Узел Wan Image To Video SVIPro использует изображения и латентные представления для генерации начальных условий видео-последовательности, являясь ключевой отправной точкой для построения рабочего процесса генерации видео.

Функциональность узла

Его основная функция — преобразование одного или нескольких изображений (в качестве латентных сэмплов) во временные условия, подходящие для обработки видео-моделью. Узел принимает «якорные сэмплы» и, опционально, «предыдущие сэмплы», комбинируя их с указанной длительностью видео, чтобы создать выходные данные, содержащие условия для позитивных и негативных промптов, а также начальный латентный шум, закладывая основу для последующих шагов генерации видео. Это упрощает переход от статического изображения к динамическому видео.

Сценарии использования

Типичное применение — создание короткого видео-ролика, сгенерированного под руководством изображения определенного стиля, например, преобразование пейзажной картины в динамический таймлапс. При создании анимационных короткометражек его можно использовать для генерации начального состояния последовательности промежуточных кадров на основе ключевых кадров. Кроме того, при генерации последовательного видео, где требуется сохранить согласованность персонажа или сцены, Wan Image To Video SVIPro может эффективно использовать информацию из предыдущего кадра для инициализации следующего видео-сегмента.

Примечания

При использовании этого узла обратите внимание, что параметр length определяет общее количество кадров в генерируемом видео, и его значение влияет на временное измерение выходного латентного тензора. Если предоставлены prev_samples, параметр motion_latent_count позволяет контролировать, какое количество кадров исторической информации используется для влияния на генерацию новой последовательности, что способствует повышению связности между кадрами видео.

Входы

• positive (CONDITIONING, Обязательно): Условие позитивного промпта.
• negative (CONDITIONING, Обязательно): Условие негативного промпта.
• length (ЦЕЛОЕ, Обязательно, По умолчанию=81, Мин.=1, шаг=4): Количество кадров в генерируемом видео.
• anchor_samples (LATENT, Обязательно): Латентные представления якорного изображения(ий), определяющие содержимое.
• prev_samples (LATENT, Опционально): Латентные представления предыдущих кадров видео для временной непрерывности.
• motion_latent_count (ЦЕЛОЕ, Обязательно, По умолчанию=1, Мин.=0, Макс.=128, шаг=1): Количество исторических кадров, используемых для формирования новой последовательности.

Выходы

• CONDITIONING: Тензор условия позитивного промпта для видео-модели.
• CONDITIONING: Тензор условия негативного промпта для видео-модели.
• LATENT: Тензор начального латентного шума, представляющий начало видео.

Ссылка на исходный код узла Wan Image To Video SVIPro

Узел Wan Image To Video SVIPro взят из пакета узлов ComfyUI-KJNodes.