Wan AnyFrame2Video with VACE

詳細

ファイルをダウンロード

モデル説明

名前の通りに動作します。

開始フレームと終了フレーム、中央の単一フレーム、開始→33%→66%→終了など、任意のフレームの組み合わせを設定できます。

Native と KJ の Wrapper 解決策を使用していますが、Native は何かの理由で動作しません。

Wflow は以下の3つの部分で構成されています:

  1. キーフレーム設定

  2. Native VACE

  3. Wan Wrapper VACE

フレームは自由に設定できますが、マスクはキーフレームと一致させる必要があります—バッチ内の位置が一致している必要があります。基本的には、キーフレームを VACE から「保護」するために空のマスクを適用し、参照用として使用できるようにする必要があります。例として添付された .zip ファイルには、4つの画像に分割された画像グリッドが含まれており、これらがキーフレームとして使用されています。その間の隙間は空のフレームで埋められています。これは Wflow の唯一の関連部分であり、その他の部分は例を参照してください。

Native VACE と Wan Wrapper VACE は機能的に同じで、実装が異なるだけです。どちらか一方を使用してください。プロンプトを入力して実行してください。CausVid と AccVideo LoRA は、品質をやや犠牲にして生成速度を向上させるために使用されており、両方とも KJ の Hugging Face リポジトリに含まれています。

現在、Native は動作しません(あるいは、開始から終了までのフレームは動作しますが、その他のフレームは動作しません)。

WanWrapper は独立した VACE モジュール(KJ のリポジトリから取得)を備えており、Phantom や MoviiGen などのさまざまなファインチューニングと組み合わせて使用できるため、優れた選択肢です。

KJ の VACE および t2v:https://huggingface.co/Kijai/WanVideo_comfy/tree/main

VACE gguf:https://huggingface.co/QuantStack/Wan2.1-VACE-14B-GGUF/tree/main

VACE native:https://huggingface.co/Comfy-Org/Wan_2.1_ComfyUI_repackaged/tree/main/split_files/diffusion_models

このモデルで生成された画像

画像が見つかりません。