Wan AnyFrame2Video with VACE

详情

模型描述

按名称所示的功能。

允许设置任意组合的帧——无论是起始和结束帧、中间单帧,还是起始->33%->66%->结束。

原生方案和KJ的封装方案,但原生方案不知为何无法工作。

Wflow由三部分组成:

  1. 关键帧设置
  2. 原生VACE
  3. Wan封装VACE

你可以任意设置帧,但需保持掩码与关键帧一致——它们在批次中的位置应匹配。基本上,你需要用空掩码“保护”关键帧,使其可用于参考。例如,.zip文件中包含一个被划分为四张图像的图像网格,这些图像作为关键帧;其间用空帧填充。这是wflow中唯一相关的部分,其余内容可参见示例。

原生VACE和Wan封装VACE功能相同,仅实现方式不同——任选其一即可。提供提示词并点击运行。CausVid和AccVideo LoRAs用于加速生成,但会略微牺牲质量,两者均位于KJ的Hugging Face仓库中。

目前原生方案无法工作(或者说,仅起始到结束帧可用,其余不可用)。

Wan封装版拥有独立的VACE模块(可从KJ的仓库获取),这意味着它可与多种微调模型(如Phantom和MoviiGen)配合使用,因此是更优选择。

KJ的VACE和t2v:https://huggingface.co/Kijai/WanVideo_comfy/tree/main

VACE gguf:https://huggingface.co/QuantStack/Wan2.1-VACE-14B-GGUF/tree/main

原生VACE:https://huggingface.co/Comfy-Org/Wan_2.1_ComfyUI_repackaged/tree/main/split_files/diffusion_models

此模型生成的图像

未找到图像。