Wan2_2-Animate-14B_fp8_e5m2_scaled_KJ.safetensors

从 Hugging Face 转移

https://huggingface.co/Kijai/WanVideo_comfy_fp8_scaled/tree/main/Wan22Animate

Wan-Animate：基于整体复刻的统一角色动画与替换

示例工作流：https://www.runninghub.ai/post/1969068684759212034
（此工作流源自 KJ Discord，仍处于实验阶段，但您已可自行尝试。）

---

功能概述
Wan-Animate 可根据表演者的视频为任何角色生成动画，精确复刻表演者的面部表情与动作，生成高度逼真的角色视频。

Wan-Animate 还可将视频中的角色替换为动画角色，在保留其表情与动作的同时，复刻原始场景的光照与色彩基调，实现无缝的环境融合。

摘要
我们提出 Wan-Animate，一种统一的角色动画与替换框架。给定一张角色图像和一段参考视频，Wan-Animate 能通过精确复刻视频中角色的表情与动作，生成高保真的角色动画视频； alternatively，它亦可将动画角色融入参考视频中，替换原始角色，并复刻场景的光照与色彩基调，实现无缝的环境融合。Wan-Animate 基于 Wan 模型构建。为适配角色动画任务，我们采用改进的输入范式，区分参考条件与生成区域，该设计将多个任务统一为共同的符号表示。我们使用空间对齐的骨架信号复刻身体动作，并从源图像中提取隐式面部特征以重演表情，从而生成高可控性与高表现力的角色视频。此外，为提升角色替换时的环境融合效果，我们开发了辅助的重光照 LoRA 模块，该模块在保持角色外观一致性的同时，施加恰当的环境光照与色彩基调。实验结果表明，Wan-Animate 达到了业界领先水平。我们致力于开源模型权重及源代码。