WAN VACE Clip Joiner - Native workflow - 2.1 or 2.2

详情

模型描述

  • v1.2 - 小更新 2025年10月13日

    • 对输入目录列表进行排序。
  • v1.1 - 小更新 2025年10月11日

    • 在工作流 VACE 输出中保留输入帧率。此前,所有输出均强制为 16fps。请注意,您必须在“合并与保存”输出中手动设置帧率。

    • 将默认模型/采样器更改为 Wan 2.2 Fun VACE fp8/KSampler。GGUF、MoE、2.1 版本仍可在绕过的子图中使用。


此工作流使用 Wan VACE(Wan 2.2 Fun VACE 或 Wan 2.1 VACE,任选其一!)来平滑视频片段之间的生硬运动过渡。如果您的片段开头或结尾存在噪点帧,此技术也能有效消除它们。

我已使用此工作流将首尾帧视频连接起来一段时间,认为其他人也可能觉得它有用。

该工作流会遍历目录中的任意数量视频片段,通过替换过渡处的可配置帧数来生成平滑过渡。过渡前后相邻的帧将作为生成替换帧的上下文,上下文帧的数量也可配置。可选地,工作流还能将平滑后的片段合并在一起;当然,您也可以在您喜欢的视频编辑器中完成这一步。

详细使用说明包含在工作流中,请仔细阅读。这不是一个开箱即用的工作流,您需要根据自己的系统进行修改。 指导如何修改的内容已在说明中提供。

VACE 有时会影响其生成片段的亮度或饱和度。我不清楚如何避免这一倾向,我认为这可能是模型固有的问题。目前我找到的最佳缓解方法是将帧率插值至 60fps,并在后期处理中进行色彩校正。

我尽量使用原生节点,并将自定义节点依赖降至最低。以下包为必需项,均可通过 Manager 安装:

  • ComfyUI-KJNodes

  • ComfyUI-VideoHelperSuite

  • ComfyUI-mxToolkit

  • Basic data handling

  • ComfyUI-GGUF — 仅在您需要加载 GGUF 模型时才需要。若不需要,可删除使用 GGUF 的采样子图以移除此依赖。

  • KSampler for Wan 2.2. MoE for ComfyUI — 仅在您计划使用 MoE KSampler 时才需要。若不需要,可删除 MoE 采样子图以移除此依赖。

此工作流使用了子图,因此您的 ComfyUI 需保持相对更新。

模型加载与推理被隔离在子图中,因此您应能轻松根据自己的偏好设置修改此工作流:只需用实现您所需功能的采样子图替换提供的采样子图,然后接入工作流即可。

我乐于解答关于此工作流的问题,但不太愿意教您 ComfyUI 的基础用法。

外部链接:https://files.catbox.moe/erx0k4.json

关于帧率

如果您的输入视频帧率较高,可能获得次优结果。Wan 模型是在 16fps 上训练的,因此在更高帧率下,VACE 的效果可能递减。至少,您需要根据您的帧率超过 16fps 的倍数,相应增加上下文帧数和替换帧数。

我建议在使用此工作流处理时,将输入强制降为 16fps,处理完成后再插值回您所需的帧率。

模型

由于这是一个属于“中级”水平的工作流,我最初未提供任何关于所需模型的信息。任何需要平滑一组已生成视频片段过渡的人,大概都熟悉 Wan 工作流。

但我意识到,并非所有人都知道如何获取 VACE 模型,或确切知道如何使用它们。而且可能也不是广为人知:VACE 是由 T2V 模型衍生而来,而非 I2V。

以下是 VACE 模型的下载链接。请根据您的系统和使用场景选择合适的版本。您已清楚只需要从列表中选取一套 VACE 文件,因此我不会侮辱您的智力去重复说明这一点。

此外,您当然还需要常规的 VAE 和文本编码器模型,以及可能的闪电 LoRA。请使用 T2V LoRA,因为 VACE 是基于 Wan 的 T2V 模型训练的。

此模型生成的图像

未找到图像。