Wan2.2 Animate Native ComfyUI Fast GGUF

詳細

ファイルをダウンロード

モデル説明

Wan2.2 Animate GGUF - 動画アニメーションワークフロー

概要

このComfyUIワークフローは、GGUF形式のWan2.2-Animate-14Bモデルを使用して、高品質な動画アニメーションとキャラクターのモーション転送を可能にします。参照画像とモーションソース動画からアニメーション動画を作成するために特別に設計されています。

主な特徴

🚀 GGUFモデルの最適化

  • 効率的なメモリ使用と高速ロードを実現するGGUF形式を使用

  • 多様なハードウェア構成と互換性

  • モデル、CLIP、VAEコンポーネント用の別々のGGUFローダーを含む

🎭 ダブル操作モード

  • キャラクター置換モード:背景を維持したまま、既存の動画のキャラクターを置換

  • モーション転送モード:新しいシーンや環境にキャラクターのポーズを適用

🛠️ 高度な前処理

  • SAM2を使用したインタラクティブなポイントベースセグメンテーション

  • DWPreprocessorによる自動ポーズ検出

  • キャラクターの保持を向上させるための顔特徴抽出

  • スマートな動画スケーリングとフレーム管理

ワークフロー構造

ステップ1:モデルのロード

  • Wan2.2-Animate-14B GGUFモデルをロード

  • CLIPテキストエンコーダーとVAEデコーダーを設定

  • より良い結果を得るためにオプションでLoRAを適用

ステップ2:入力設定

  • キャラクターの外観用の参照画像のアップロード

  • モーションキャプチャ用のソース動画

  • ポジティブ/ネガティブプロンプトの設定

ステップ3:動画前処理

  • ソース動画からフレーム、オーディオ、FPSを抽出

  • 最適な解像度(16の倍数)に動画をリサイズ

  • ポーズと顔の参照データを生成

ステップ4:キャラクターマスク作成

  • 精密なキャラクター選択用のインタラクティブなポイントエディタ

  • ポジティブ/ネガティブポイントのガイド付きSAM2セグメンテーション

  • GrowMaskおよびBlockifyMaskノードによるマスクの精錬

ステップ5:アニメーション生成

  • フレキシブルな動画生成のためのダブルKSampler設定

  • WanAnimateToVideoノードが核心的なアニメーションロジックを処理

  • バッチ処理による動画長の拡張をサポート

ステップ6:動画出力

  • 生成されたフレームを元のオーディオと再結合

  • スムーズな再生のために元のFPSを維持

  • SaveVideoノードによる複数の出力オプション

技術的要件

ハードウェア

  • GGUFフォーマットにより、さまざまなGPU/CPU構成と互換性

  • 標準モデル形式と比較してVRAM要件が低減

  • 最適なパフォーマンスには8GB以上のRAMを推奨

ソフトウェア

  • 必要なカスタムノードを備えたComfyUI:

    • ComfyUI-segment-anything-2 (SAM2)

    • comfyui-controlnet-aux (プリプロセッサ)

    • comfyui-kjnodes (ユーティリティノード)

    • GGUFローダーノード

使用方法

  1. モデルのロード:すべてのGGUFモデルファイルが正しいディレクトリに配置されていることを確認

  2. 解像度の設定:幅/高さを16の倍数に設定(例:640x640)

  3. メディアの入力:参照画像とソース動画をアップロード

  4. マスク作成:ポイントエディタを使用してキャラクター領域をマーク(ポジティブポイントはShift+クリック)

  5. プロンプトの設定:ポジティブおよびネガティブテキストプロンプトを設定

  6. 実行:ワークフローを実行し、プレビューノードで進行状況を監視

適した用途

  • 静止画像からのキャラクターアニメーション

  • 動画間のモーション転送

  • キャラクターを維持した動画スタイル転送

  • ショートフィルムおよびソーシャルメディア用コンテンツ作成

このワークフローは、GGUFモデルフォーマットを活用して高品質と計算効率を両立した、洗練された動画アニメーションパイプラインを提供します。

このモデルで生成された画像

画像が見つかりません。