InfiniteTalk: 数字人头与虚拟人视频生成

InfiniteYou推出的InfiniteTalk是基于Wan2.1构建的数字人头与虚拟人视频生成模型,支持14B fp16单图生成唇形同步虚拟人物。

I

InfiniteTalk

Wan万相2.1数字人头虚拟人唇形同步音频驱动

基于Wan2.1的数字人头与虚拟人视频生成模型。支持14B fp16单角色与多角色变体。从单张肖像图像生成自然唇形同步的虚拟人物。

开发者InfiniteYou (字节跳动)
架构基于Wan2.1的I2V微调
模型规模14B fp16
变体单角色、多角色
能力音频驱动数字人头、唇形同步虚拟人生成

概述

InfiniteYou推出的InfiniteTalk是基於Wan2.1 I2V微调的数字人头与虚拟人视频生成模型。它可将单张肖像图像转化为由音频输入驱动的自然唇形同步虚拟人物。模型支持单角色与多角色变体,可实现多说话人对话场景。

基于Wan2.1 I2V 480p构建的InfiniteTalk能够保留面部身份特征,同时生成与输入音频匹配的同步口型动作和自然的头部运动。

ComfyUI集成

InfiniteTalk兼容ComfyUI WanVideo原生节点和Kijai的WanVideoWrapper。模型文件可在Kijai/WanVideo_comfy仓库获取,提供fp16、fp8和GGUF格式。

Guides and workflows related to this model series.

No articles found.