Tik Tok Dance Workflow (Solid Colour Background)
詳細
ファイルをダウンロード
このバージョンについて
モデル説明
はじめに
このワークフローはユーザーの要望に基づいて生成されました。これまで、私のMimic Motionワークフローのバージョンで、ユーザーが画像（写真、SDXLまたはFluxから）を入力し、そのダンス動画を単色背景に置き換えて、あらゆる動画編集ソフトウェアに取り込めるようにするというリクエストを多数いただいてきました。
このワークフローでは、Mimic Motionを使用してキャラクターの動きを生成し、Grounding Dinoを使用してキャラクターを単色背景に合成します。
ComfyUI版
このワークフローはComfyUI v0.21でテスト済みであり、マネージャーからカスタムノードをインストールする際、パッケージの競合は発生しません：https://github.com/comfyanonymous/ComfyUI/releases/tag/v0.2.1
制限事項
上記の動画をご覧になると、ダンサーの髪との相互作用が正しくアニメーションされていないことに気づくでしょう。これは、Mimic MotionがOpen Pose情報のみを入力として使用しているためです。深度情報も使用すれば、髪との相互作用は正しくアニメーションされます。
ノード
ノードは色分けされています：
赤：これらのモデルはダウンロードして、適切なフォルダに配置する必要があります。ダウンロード後、ComfyUIをリフレッシュし、正しいモデルが選択されていることを確認してください。
青：これらはユーザー入力であり、元のダンス動作を含む動画またはプロンプト/設定です。
茶色：これらはワークフローの動作を説明するコメントです。
不足しているノードはComfyUIマネージャーを使用してインストールしてください。このワークフローで使用するカスタムノードは以下の通りです：
ComfyUI Impact Pack
ComfyUI Frame Interpolation
AnimateDiff Evolved
ComfyUI-VideoHelperSuite
ReActor Node for ComfyUI
rgthree's ComfyUI Nodes
ComfyUI Essentials
ComfyUI-MimicMotionWrapper
segment anything
モデル
一部のモデルは自動的にダウンロードされ、一部はComfyUIマネージャーを使用してダウンロードされ、その他は手動でダウンロードして対応するフォルダに配置する必要があります。
AnimateLCM: https://huggingface.co/wangfuyun/AnimateLCM AnimateLCM_sd15_t2v.ckptを「models/animatediff_models」に、AnimateLCM_sd15_t2v_lora.safetensorsを「models/loras」に配置してください。
SD1.5チェックポイント：生成する動画の種類（リアル/アニメ）に応じてお好みのものを使用できます。私はリアルな生成を目指してRealistic Visionを使用しています。
control_v11p_sd15_openpose.safetensors：ComfyUIマネージャーでダウンロードしてください。
MimicMotion、Segment Anything、Grounding Dino、ReActorモデルは自動的にダウンロードされます。
insightfaceのインストールで問題が発生した場合は、トラブルシューティングセクションの手順に従ってください：https://github.com/Gourieff/comfyui-reactor-node