Alibaba Cloud PAI выпускает Z-Image-Turbo-Fun-Controlnet-Union

Команда Alibaba Cloud PAI недавно выпустила Z-Image-Turbo-Fun-Controlnet-Union — модель ControlNet, разработанную для Z-Image-Turbo.

Информация о модели

Модель поддерживает следующие условия управления:

Canny - Обнаружение краёв
HED - Иерархическое обнаружение краёв
Depth - Карта глубины
Pose - Поза человека
MLSD - Обнаружение отрезков линий

Модель была обучена на 1 миллионе высококачественных изображений в разрешении 1328 за 10 000 шагов.

Поддержка ComfyUI

ComfyUI в настоящее время работает над поддержкой этой модели. Пользователи могут следить за обновлениями ComfyUI и смогут использовать её в рабочих процессах (workflows) после появления официальной поддержки.

Использование

В настоящее время модель можно использовать через репозиторий VideoX-Fun. Команда разработчиков планирует обучить модель на большем количестве данных и добавить поддержку режима inpaint в будущем

Ссылки

Модель: https://huggingface.co/alibaba-pai/Z-Image-Turbo-Fun-Controlnet-Union
Репозиторий GitHub: https://github.com/aigc-apps/VideoX-Fun