Wan2.2-Animate-14B-fp8

详情

下载文件

模型描述

如果你厌倦了 ComfyUI 的错误和复杂的节点,可以免费使用在线平台。

https://www.runninghub.ai/post/1969068684759212034

别忘了使用此代码(rh-v1213)

FP8 模型下载地址在其中。


Wan-Animate:基于整体复现的统一角色动画与替换

功能概览
Wan-Animate 能够根据表演者的视频为任何角色生成动画,精确复现表演者的面部表情和动作,生成高度逼真的角色视频。

Wan-Animate 可在视频中将原角色替换为动画角色,同时保留其表情与动作,并复现原始场景的光照与色彩色调,实现无缝的环境融合。

摘要
我们提出 Wan-Animate,一种统一的角色动画与替换框架。给定一个角色图像和一个参考视频,Wan-Animate 能够通过精确复现视频中角色的表情与动作,生成高保真度的角色动画视频;或将其动画角色融入参考视频中,替换原始角色,并复现场景的光照与色彩色调,实现无缝的环境融合。Wan-Animate 基于 Wan 模型构建。为适配角色动画任务,我们采用改进的输入范式,区分参考条件与生成区域,该设计将多种任务统一为共同的符号表示。我们利用空间对齐的骨架信号复现身体动作,并从源图像中提取隐式面部特征以重现表情,从而生成具有高可控性与表现力的角色视频。此外,为提升角色替换时的环境融合效果,我们开发了一种辅助的重光照 LoRA 模块,该模块在保持角色外观一致性的同时,施加适当的环境光照与色彩色调。实验结果表明,Wan-Animate 达到了当前最先进水平。我们致力于开源模型权重及源代码。

此模型生成的图像

未找到图像。