LTXV Photo Animator

詳細

ファイルをダウンロード

モデル説明

このアニメーターは、Lightricks GitHub ページのフレーム補間ワークフローを基にしています。

この ComfyUI ワークフローを使用すると、被写体の複数の写真を用いて、その間のすべてを補間し、アニメーションを作成できます。

インストール方法:

Non-GGUF 版:

Civitai の LTX 0.9.5 ページの手順を読み、このページからフォトアニメーターをダウンロードし、ComfyUI で LTXV095_photo_animator.json を開いてください。

GGUF 版:

City96 の HuggingFace からお好みの GGUF ファイルをダウンロードしてください。Q8 は、すべてのモデルを読み込んだ状態で 10GB の GPU にぎりぎり収まり、12GB ではより快適に動作します。より小さなサイズのファイルは、アニメーションにアーティファクトやエラーが発生する可能性がありますが、より簡単に収まります。

次に、City96 の HuggingFace から VAE をダウンロードしてください。

また、City96 の HuggingFace からお好みの T5 テキストエンコーダーをダウンロードしてください。CFG がこのワークフローで 1 に設定されているため、より小さなモデルでも動作します。

以上を終えたら、ComfyUI で LTXV095_photo_animator_gguf-edition.json を開いてください。

使用方法:

ワークフローを使用して、写真を下部に順番に追加してください。次に、アニメーションのフレームレートを考慮してください。LTX のデフォルトは 25fps ですが、このワークフローでは滑らかなアニメーションのために 60fps に設定されています(ただし処理時間が長くなります)。必要に応じて変更し、同時にビデオ出力のフレームレートも変更してください。

次に、各写真の間のフレーム数を 8 の倍数で考えましょう(LTX の動作原理に基づいています)。25fps で、最初の写真と2番目の写真の間に約1秒を設ける場合、写真1にはフレームインデックス 0、写真2にはフレームインデックス 24 を使用してください。60fps の場合は、フレームインデックス 0 と 56、または 64 を使用します。

下部左側のフレーム数は、最後のフレームインデックス + 1 にしてください。たとえば、200 の場合、フレーム数を 201 に設定してください。

注意点:

6つの写真ノードグループのうち2つはデフォルトでバイパスされています。マウスで Ctrl キーを押しながら選択することで、それらを有効化でき、同様に他の写真ノードグループをバイパスできます。

1つの被写体の動きに焦点を当ててください。複数の被写体がある場合、アニメーションを複数のパートに分割し、動画編集ソフトでつなぎ合わせることを推奨します。LTX は複数の被写体に混乱する可能性があるためです。ペンのアニメーションでは、この理由から同時に2つの写真を使用しています。

多めに写真を撮影し、事前に何を実現したいかを考えてください。必要に応じてさらに写真を追加する場合、照明が変わっている可能性があるため、多めに撮影するのが望ましいです。

LTX では通常長めのプロンプトが推奨されますが、必ずしも必要ではありません。ペンのアニメーションではプロンプトを使用していません。

MMAudio は各動画に対して個別に使用しました。私の ComfyUI は MMAudio を読み込めないためです。Civitai で適切なワークフローを検索してください。

IPNDM は、テストで大きなアーティファクトを発生させずに動作する唯一のサンプラです。

私のシステムはハードウェアの制約により、GGUF 版のみを実行できます。通常版も動作するはずです。LTX 0.9.6 が最近リリースされ、さらに良い結果が得られる可能性がありますが、現時点では GGUF 版は提供されていません。

良い結果をお祈りしています、楽しいアニメーション制作を!

このモデルで生成された画像

画像が見つかりません。