FAQR: Faking QR Morphs (bTeam)

FAQR

このワークフローは、SDXLアニメーション中のRAM使用量を削減するために設計されたいくつかの新規な概念を導入していますが、これらは他のワークフローにも適用できます。

主な概念は、QRMonsterを使用して8枚の画像を生成し、それらをIPAdapterに供給して、アニメーション段階でQRMonster SDXLを使用せずに「QRモーフィング」効果を実現することです。もう一つの技は、この段階でHotShotXLモーションモジュールを非常に低いレートで使用することです。これにより、フレームは似たような外見になりますが、滑らかなアニメーションを生み出すほど高くはなりません。その後、Cannyプリプロセッサを使用し、小さなDepthおよびCannyコントロールネットに供給することで、約5GBのVRAMを節約します。

ソースビデオを変更する場合、いくつかの調整が必要になるでしょう。主に覚えておくべきことは、IPAdapterの重みによって生成される長さをカバーするために、ソースビデオに十分なフレーム数を確保する必要があるということです。この例では、RIFEを使用してより多くのフレームを生成してカバーしました。

設定はLightningチェックポイント用です。長い待機時間を許容する場合は、通常のチェックポイントを使用しても構いません。