ComfyUI Txt2Video with SVD
详情
下载文件
关于此版本
模型描述
更新:您可以在此处下载 SVD 1.1 版本: https://huggingface.co/stabilityai/stable-video-diffusion-img2vid-xt-1-1/tree/main
“本模型经过训练,可基于一个相同尺寸的上下文帧生成 25 帧、分辨率为 1024x576 的视频,该模型在 SVD 图像到视频 [25 帧] 的基础上进行了微调。”
基于 Stable Video Diffusion 的 Img2Video,通过此 ComfyUI 工作流,您可以使用所需的提示词、负面提示词以及检查点(和 VAE)生成一张图像,随后系统将自动使用该图像生成视频。
v1.3_sd3:使用 Stable Diffusion 3 和 SVD XT 1.1 进行文本到视频生成
有关下载 Stable Diffusion 3 模型及放置 .safetensors 文件的位置信息:/model/497255/stable-diffusion-3-sd3
v1.3_cascade:使用 Stable Cascade 和 SVD XT 1.1 进行文本到视频生成
有关下载 Stable Cascade 模型及放置 .safetensors 文件的位置信息:https://gist.github.com/comfyanonymous/0f09119a342d0dd825bb2d99d19b781c
v1.3:SVD 默认模型现在为:svd_xt_1_1.safetensors
生成 .gif 文件(.mp4 文件仍保留)
v1.2:将 SVD img2vid_conditioning 的默认帧率从 8 改为 10,此前该值错误地与保存的 10 帧率和保存的 .webp 帧率不一致
v1.1:界面更清晰
v1:首个版本
要求:
1- 在 Windows 上:仅支持 NVIDIA 显卡,VRAM 至少 8 GB
在 Linux 上:支持 NVIDIA 和 AMD 显卡,VRAM 至少 8 GB
2- ComfyUI:https://github.com/comfyanonymous/ComfyUI
3- 本工作流
4- 在 ComfyUI\models\checkpoints 中:
https://huggingface.co/stabilityai/stable-video-diffusion-img2vid/blob/main/svd.safetensors <-- 用于 14 fps 视频
或
https://huggingface.co/stabilityai/stable-video-diffusion-img2vid-xt/blob/main/svd_xt.safetensors <-- 用于 25 fps 视频
5- 在 ComfyUI\models\checkpoints 中放置一个检查点
6- 在 ComfyUI\models\vae 中放置一个 VAE(可选)
7- 安装 ComfyUI Manager 以获取缺失节点:https://github.com/ltdrdata/ComfyUI-Manager
附注:SVD 推荐分辨率为 576x1024,但本工作流中默认设置为 512x768(40 步即可,20 步也足够)。您可以自行选择分辨率和步数,但 512x768 配合 40 步是一个不错的初始尝试参数。
如果您想支持我,请访问我的 Patreon:https://www.patreon.com/Shiroppo
在 Civitai 上关注我(!!!):https://civitai.com/user/shiroppo
在 Twitter/X 上关注我:https://x.com/ShiroppoTwit
Pixiv:https://www.pixiv.net/users/96490888

