Wan VACE Clip Extender
詳細
ファイルをダウンロード
モデル説明
ComfyUI Wan VACE ビデオ拡張ツール
このワークフローは、Wan VACE を使用して、ビデオの指定されたポイントから新しいフレームを生成します。
機能概要
これは、Wan VACE を使用してビデオを最小限の手間で迅速に拡張することを目的とした、軽量で(ほぼ)カスタムノードを必要としない ComfyUI ワークフローです。ビデオを読み込むだけで、拡張を開始するポイントと生成する新規フレーム数を指定するだけです。
依存関係
このワークフローを実行するには、私の ComfyUI-Wan-VACE-Prep カスタムノードパッケージが必要です。このパッケージは、複雑でごちゃごちゃしたワークフローの計算を大幅に簡略化し、この軽量バージョンの実現を可能にしています。
ComfyUI Manager で _Wan VACE Prep を検索するか、ワークフローを読み込んだ後に Manager の Missing タブを訪れてください。
このパッケージは非常に軽量で依存関係がなく、システムに悪影響を及ぼす可能性は極めて低いです(もしそういったことが心配であれば)。
このワークフローおよびカスタムノードは Nodes 2.0 UI でテストしていません。
設定とモデル
このワークフローを実行するには、以下のモデルのいずれかを組み合わせて必要とします。前述の通り、適切に設定しない限り、このワークフローは正しく動作しません。おそらく既にご自身のシステムで安定して動作する Wan ビデオ生成ワークフローをお持ちでしょう。このワークフローは、その生成ワークフローと同様に設定する必要があります。Sampler サブグラフには KSampler ノードとモデル読み込みノードが含まれています。ご自身の環境に合うように調整してください。システムが対応している場合、sageattention および torch compile ノードを有効にしてください。すべてのサブグラフの入出力が正しくデータを取得・設定していることを確認し、特に読み込む拡散モデルが Wan2.2 Fun VACE または Wan2.1 VACE のいずれかであることが重要です。GGUF ファイルは問題なく動作しますが、VACE 以外のモデルは動作しません。
Wan 2.2 Fun VACE
Wan 2.1 VACE
Kijai が抽出した Fun VACE 2.2 モジュール(標準の T2V モデルと一緒に読み込む用)。ネイティブ使用例はこちら。
問題解決
Tensor a のサイズが、非単一次元の次元 1 で Tensor b のサイズと一致しません - 入力ビデオの両方の次元が 16 で割り切れるか確認し、そうでない場合は変更してください。ちなみに、1080 は 16 で割り切れません!
明るさ・色調の変化 - VACE は生成されるクリップの明るさや彩度に影響を与えることがあります。残念ながら、この傾向を回避する方法は私にはわかりません。おそらくモデルに組み込まれているのでしょう。lightx2v スピード LoRA を無効にすると改善することがあります。また、このワークフローで使用する LoRA とその強度を、クリップ生成時に使用したものと完全に一致させることも有効です。一部のユーザーは、このワークフローの出力前にカラーマッチノードを使用することで成功したと報告しています。ただし、具体的な解決策はケースバイケースである可能性が高いです。私が見つけた最も安定した対策は、このワークフロー使用後にフレームレートを 30 または 60 fps に補間することです。補間により色の変化が視覚的に目立たなくなります。色のずれは依然として存在しますが、16フレームではなく60フレームに分散されるため、目には急激な変化として映らなくなります。
フレームレートについて - Wan モデルは 16 fps で訓練されています。したがって、入力ビデオのフレームレートがそれより高い場合、最適な結果が得られない可能性があります。少なくとも、VACE と同じ効果を得るためには、フレームレートが 16 fps を超える分だけ、コンテキストフレーム数と置換フレーム数を増やす必要があります。このワークフローでは、入力を 16 fps に固定して処理し、その後希望のフレームレートに再補間することを推奨します。
ワークフローが動作しない場合は、ComfyUI を更新して再試行してください。ComfyUI を更新したくない場合は、私はお手伝いできません。同じ出発点から始めなければなりません。
ご自由に GitHub に問題を報告してください。これが私に直接連絡する最も確実な方法です。もし始めやすいようにしたい場合は、失敗した実行時のコンソールログ全体を問題に貼り付けてください。
チェンジログ
- v1.0.0 初期リリース。
