Partially Animate an Image

此工作流使用 SD1.5 生成图像，然后利用 Grounding Dino 对图像的特定部分进行掩码，以便用 AnimateLCM 进行动画处理。它生成 16 帧动画，并使用循环上下文选项生成可循环播放的视频。视频生成步骤中 KSampler 的去噪强度设为 0.8，以保留原始生成图像的部分结构。

基于：https://comfyworkflows.com/workflows/14d8d52b-1297-4d58-8469-2bdab4f5ebf1

所需模型：

1. 你最喜欢的 SD1.5 检查点

2. AnimateLCM 和 LORA（https://huggingface.co/wangfuyun/AnimateLCM）：将 Lora 放入 models/loras 文件夹，模型放入 models/animatediff_models 文件夹

3. SAM 模型（Manager > 安装模型，搜索 SAM）：sam_vit_b_01ec64.pth

4. Grounding Dino 模型（将自动下载）

5. 你最喜欢的超分模型（Manager > 安装模型，搜索 upscale）：4x_NMKD-Siax_200k.pth

说明：

1. 青色节点为工作流所需的模型

2. 蓝色节点为必需的用户输入。本工作流需要三个提示：
   a) 图像生成提示：描述你希望在整体图像中呈现的内容，例如 “山脉、河流、云朵”
   b) GroundingDino 提示：描述你希望进行动画处理的图像中的对象，例如 “河流”
   c) 视频提示：描述你希望动画对象执行的动作，例如 “流动的河流”

3. 对于显存不足的用户，可以禁用“使用模型超分图像”节点。这将把 KSampler 的输入分辨率降低为 256 x 256 x 16 帧。如果此设置可行，你还可以跳过“按比例超分图像”节点，将分辨率提升至 512 x 512 x 16 帧。原始工作流（未跳过任何节点）将生成 1024 x 1024 x 16 帧的视频。感谢 mojoflojo 在低显存 GPU 上协助测试。