Wan2_2_Animate_14B_Q4_K_M.gguf
详情
下载文件
模型描述
从 HuggingFace 转移
https://huggingface.co/Kijai/WanVideo_comfy_GGUF/tree/main/Wan22Animate
这是 Wan2.2-Animate 模型的 GGUF 版本,工作流示例与 fp8 版本相同,你只需将 “Wan2_2-Animate-14B_fp8_e5m2_scaled_KJ.safetensors” 模型替换为此 GGUF 版本(使用 gguf 加载器)
示例工作流:https://www.runninghub.ai/post/1969068684759212034
(此工作流源自 KJ 的 Discord,仍处于实验阶段,尚未完善,但你已可自行尝试。)
功能概述
Wan-Animate 可根据表演者的视频为任何角色添加动画,精确复现表演者的面部表情和动作,生成高度逼真的角色视频。
Wan-Animate 能够在视频中用动画角色替换原角色,同时保留其表情与动作,并复现原始光照和色彩色调,实现无缝的环境融合。
摘要
我们提出 Wan-Animate,一种统一的角色动画与替换框架。给定一个角色图像和一个参考视频,Wan-Animate 能通过精确复现视频中角色的表情与动作,生成高保真角色视频;或者,它可将动画角色整合进参考视频中,替换原始角色,并复现场景的光照与色彩色调,实现无缝环境融合。Wan-Animate 基于 Wan 模型构建。为适应角色动画任务,我们采用改进的输入范式,区分参考条件与生成区域。该设计将多种任务统一为共同的符号表示。我们使用空间对齐的骨架信号复现身体运动,并从源图像中提取隐式面部特征以重演表情,从而生成高可控性与高表现力的角色视频。此外,为提升角色替换时的环境融合效果,我们开发了辅助的重光照 LoRA 模块。该模块在保持角色外观一致性的同时,施加正确的环境光照与色彩色调。实验结果表明,Wan-Animate 达到了业界领先水平。我们致力于开源模型权重及其源代码。
