Latent Inpaint TTM(LatentInpaintTTM)

Узел Latent Inpaint TTM реализует свою функциональность путем добавления к модели обёртки под названием TTM_OuterSampleWrapper.

Latent Inpaint TTM — это экспериментальный узел для латентного восстановления изображений. Он основан на технологии TTM (Time To Move) и предназначен для перерисовки содержимого определённых областей изображения в процессе генерации, сохраняя при этом остальные области неизменными.

Функциональность узла

Узел реализует свою функциональность, добавляя к модели обёртку под названием TTM_OuterSampleWrapper. Его основной механизм заключается в том, что в течение указанного количества шагов сэмплирования, на основе входной маски (MASK), модель направляется на восстановление содержимого в латентном пространстве в области маски (белая часть), в то время как область вне маски (чёрная часть) сохраняет своё исходное состояние. Он напрямую управляет процессом сэмплирования модели и относится к продвинутым техникам модификации моделей.

Описание параметров узла - Latent Inpaint TTM

Входные соединения (Inputs)

Параметры управления (Parameters)

Выходные данные (Output)

Сценарии использования

В рабочем процессе восстановления изображений вы можете подключить этот узел после базовой модели. Например, сначала сгенерировать исходное изображение, затем с помощью инструмента маскирования отметить область, требующую изменения, и, наконец, используя этот узел, направить модель на перерисовку только этой области в последующих шагах сэмплирования, что позволит осуществить локальную замену содержимого или исправление дефектов.

Важные замечания

Обратите внимание, что этот узел помечен как «экспериментальный», его стабильность и эффективность могут различаться в зависимости от модели и сценария. Для корректной работы требуется корректная входная маска, а результат восстановления зависит от указанного количества шагов.

Ссылка на исходный код узла Latent Inpaint TTM

Узел Latent Inpaint TTM взят из пакета узлов ComfyUI-KJNodes.