Make Clouds Dance!

導入

このワークフローは、AnimateDiff、IPAdapter、ControlNetを活用して雲を踊らせるものです。このワークフローの鍵となる革新点は、深度マップをVAEエンコードし、ノイズ除去レベルを調整することで、深度マップが雲にノイズ除去されるようにしている点です。これにより、AnimateDiffのコンテキスト長の影響で16フレームごとに動画が変形する問題を回避しています。

モデル

1. SD1.5 LCMチェックポイント。私はDreamshaper 8 LCMを使用します：/model/4384?modelVersionId=252914

2. AnimateLCM_sd15_t2v.ckpt：https://huggingface.co/wangfuyun/AnimateLCM/tree/main からダウンロードし、models/animatediff_modelsに配置してください。

3. depth_anything_v2_vitl.pth および control_v11f1p_sd15_depth_fp16.safetensors。Managerを使用してダウンロードしてください。

4. IPAdapter PLUS：ComfyUI Managerを使用して ip-adapter-plus_sd15.safetensors をダウンロードしてください。また、ViT-HおよびViT-Gのclip_visionモデルもComfyUI Managerでダウンロードしてください。

カスタムノード

Managerでインストール：

1. ComfyUI-VideoHelperSuite

2. KJNodes for ComfyUI

3. ComfyUIのControlNet補助プリプロセッサ

4. AnimateDiff Evolved

5. ComfyUI_IPAdapter_plus

6. ComfyUI Frame Interpolation