Animatediff Simple Prompt Traveling

使い方

プロンプトを調整して生成してください。

説明

これは古い技術です。AnimateDiffは、オフライン向けの最初のビデオAIソリューションの1つでした。ここでは、その最も基本的なワークフローを紹介します。他のAnimateDiffワークフローの基盤となります。

このワークフローは、AnimateDiffによるプロンプトの遷移についてです。異なるキーフレームごとに異なるプロンプトを選択し、動画内でプロンプトが徐々に変化していきます。

2つのワークフローが用意されています。1つはAnimateDiff 2および3用、もう1つはAnimateDiff 2をベースにしたAnimateLCM用です。

AnimateDiffとStable Diffusion 1.5は、512ピクセルのサイズで学習されています。そのため、作成サイズをこれより大幅に大きくすると結果が不安定になります。後からアップスケールすることをおすすめします。

両方のワークフローにはアップスケール機能が含まれていますが、別途ワークフローでアップスケールすることを推奨します。別のKsamplerを使用してください。詳細は以下の記事をご覧ください：

時間

6秒の長さで解像度1280 x 720（AIによる単純なアップスケール）の例は、16GB VRAM搭載の4060 TIで2分半ほどで完了しました。ただし、最適なアップスケール手法を使用しているわけではありません。

要件

これらのワークフローは当初、8GB VRAMで作成されました。しかし、頻繁にOOM（メモリ不足）エラーが発生しました。本格的なアップスケールを実行する場合は、少なくとも12GB VRAM搭載のGPUを推奨します。