Animatediff3 img2vid Sparse Control

描述

这是一个带有起始图像和结束图像的Animatediff 3工作流，通过稀疏控制实现。该工作流包含两个步骤：首先，你创建一个每秒8帧、符合Animatediff常用尺寸的预览视频；然后，使用Supermegabadassupscaler工作流对其进行上采样。

当然，其结果不如 newer AI 视频模型的效果好，你仍需在视频编辑软件中进行一些进一步处理。但对Animatediff而言，这仍然令人印象深刻。

使用方法

加载起始图像和结束图像，调整提示词、尺寸和时长，生成预览视频，再通过Supermegabadassupscaler工作流将该预览视频上采样至最终尺寸和帧率。

时间

一个时长4秒、尺寸为560 x 320的预览视频大约耗时两分钟生成，而将其上采样至1120 x 640则额外耗时两分半钟。

要求

该工作流至少需要12GB显存。它使用了UltimateUpscale SD节点，而在仅具有8GB显存的显卡上通常会内存耗尽。我从未能在我的旧显卡上成功运行它。