Wan2.2-Animate-14B-fp8

ComfyUIのエラーや複雑なノードに疲れた場合は、オンラインプラットフォームを無料でご利用いただけます。

https://www.runninghub.ai/post/1969068684759212034

そして、このコード（rh-v1213）を必ずご使用ください。

FP8モデルのダウンロード先は上記リンク内に記載されています。

---

Wan-Animate：統合的な複製によるキャラクターのアニメーションと置換

機能概要
Wan-Animateは、演技者の動画をもとに、任意のキャラクターをアニメーション化し、演技者の顔の表情や動きを正確に再現して、非常に現実的なキャラクタービデオを生成できます。

Wan-Animateは、動画内のキャラクターをアニメーション化されたキャラクターに置き換え、表情や動きを維持しながら、元の照明や色調も再現することで、環境へのシームレスな統合を実現します。

概要
我々は、キャラクターのアニメーションと置換を統合したフレームワーク「Wan-Animate」を提案します。与えられたキャラクター画像と参照動画から、Wan-Animateは参照動画内のキャラクターの表情と動きを正確に再現し、高忠実度のキャラクタービデオを生成できます。あるいは、アニメーション化されたキャラクターを参照動画に統合して元のキャラクターを置き換え、シーンの照明と色調を再現することで、環境へのシームレスな統合を実現します。Wan-AnimateはWanモデルを基盤として構築されています。キャラクターアニメーションタスクに適応させるため、参照条件と生成領域を区別するための変更された入力パラダイムを採用しています。この設計により、複数のタスクを共通の記号的表現に統一しています。空間的に整列された骨格信号を使用して身体の動きを再現し、ソース画像から抽出した陰的顔特徴を用いて表情を再演することで、高い操作性と表現力を備えたキャラクタービデオを生成します。さらに、キャラクター置換時の環境統合を強化するため、補助的な「Relighting LoRA」を開発しました。このモジュールは、キャラクターの外観の一貫性を維持しながら、適切な環境照明と色調を適用します。実験結果は、Wan-Animateが最先端の性能を達成することを示しています。我々は、モデルの重みとソースコードをオープンソース化することを約束します。