InfiniteTalk: Генерация видео говорящей головы и аватаров
InfiniteTalk от InfiniteYou : это модель генерации видео говорящей головы и аватаров, построенная на основе Wan2.1. Создает говорящие аватары с синхронизацией губ в формате 14B fp16 из одного изображения.
InfiniteTalk
Wan2.1Talking HeadAvatarLip SyncAudio-DrivenМодель генерации видео говорящей головы и аватаров, построенная на основе Wan2.1. Поддерживает варианты с одним и несколькими персонажами в формате 14B fp16. Создает естественные говорящие аватары с синхронизацией губ из одного портретного изображения.
| Разработчик | InfiniteYou (ByteDance) |
| Архитектура | Тонкая настройка I2V на основе Wan2.1 |
| Размеры модели | 14B fp16 |
| Варианты | Один персонаж, Несколько персонажей |
| Возможности | Управление аудио для говорящей головы, генерация аватара с синхронизацией губ |
Обзор
InfiniteTalk от InfiniteYou : это модель генерации видео говорящей головы и аватаров, тонко настроенная на Wan2.1 I2V. Она преобразует одно портретное изображение в естественного говорящего аватара с синхронизацией губ, управляемого аудиовходом. Модель поддерживает варианты как с одним, так и с несколькими персонажами, что позволяет создавать сцены диалога с несколькими говорящими.
Построенный на основе Wan2.1 I2V 480p, InfiniteTalk сохраняет идентичность лица, одновременно генерируя синхронизированные движения губ и естественные движения головы, соответствующие входному аудио.
Интеграция с ComfyUI
InfiniteTalk совместим с родными узлами ComfyUI WanVideo и WanVideoWrapper от Kijai. Файлы моделей доступны в репозитории Kijai/WanVideo_comfy в форматах fp16, fp8 и GGUF.
Guides and workflows related to this model series.