🧪 Img2Vid - FAST LOOP ANIMATION
详情
下载文件
模型描述
要启动生成过程,只需将图像拖放到橙色的“加载图像”节点中。
您可以自由调整主提示词和图像限定词,以根据需要优化上下文。工作流基础设置可生成一些出色的动画。
1. 加载器
虽然任何 SD1.5 模型都兼容,但需相应校准 LCM LoRA 权重:
• 对于 SD1.5 模型,请将权重设置为 0.7 至 1 之间。
• 对于 SD1.5 LCM 模型,请将权重调整为 1 至 2 之间。
主模型:
LCM LoRA:
• https://huggingface.co/wangfuyun/AnimateLCM/blob/main/AnimateLCM_sd15_t2v_lora.safetensors
2. IPAdapter 部分:
在 IPAdapter 部分 中,第一个图像加载器用于主图像,该图像将被裁剪以匹配构图尺寸。第二个加载器用于构图目标图像。
ClipVision:
• https://huggingface.co/laion/CLIP-ViT-H-14-laion2B-s32B-b79K/blob/main/model.safetensors
IPAdapter PLUS:
• https://github.com/cubiq/ComfyUI_IPAdapter_plus
IPAdapter 构图:
• https://huggingface.co/ostris/ip-composition-adapter/tree/main
3. AnimateDiff 部分:
使用“Multival dynamic”节点调整运动强度。
运动模型:
• https://huggingface.co/wangfuyun/AnimateLCM/blob/main/AnimateLCM_sd15_t2v.ckpt
4. ControlNet 部分
从以下三个可用的 ControlNet 中选择:
Tile:
• https://huggingface.co/lllyasviel/ControlNet-v1-1/blob/main/control_v11f1e_sd15_tile.pth
参考 ControlNet:
• 已集成于高级 ControlNet 自定义节点中。
SparseCtrl:
• https://huggingface.co/guoyww/animatediff/blob/main/v3_sd15_sparsectrl_rgb.ckpt
5. KSampler / 高分辨率修复
“PatchModelAdd”节点旨在防止超出 SD1.5 长宽比限制时出现变形和伪影。此步骤可跳过。
KSampler 选项无需调整。
根据您的初始尺寸和 VRAM 容量,微调高分辨率修复脚本。
选择使用空潜空间或注入了图像的潜空间;后者通常能保留更多原图信息,且运动效果往往更弱。
6. 输出
“GMFSS Fortuna”将对您的视频进行插值,生成更流畅、更长的输出。倍数通常设置为 2 或 3。
在视频输出下方指定自定义目录和文件名,以保持输出文件夹的整洁有序。
为方便起见,已包含可选的 HDR 输出流程。
在不更改任何分辨率设置的情况下,此工作流预计:
• 在约 2 分钟内完成渲染(32 帧 + 插值)
• 占用 16GB VRAM
• 输出分辨率为 752x1344 像素
