Waving (Frame helper LORA experiment)

どうしたの、可愛いママ？ 私のこと、寂しかったでしょ？

お金はくれなくても、せめてあなたのバズを全部ちょうだい。 Ko-fi: https://ko-fi.com/keyennorman

こんにちは。私の機械学習の旅の途中で、いくつか非常に厳しい壁にぶつかってきました。特に、AIの楽しい側面に踏み込むために必要な技術的要件です。このLORAの目的（今後、もっとたくさん登場することを望んでいます）は、私のような一般レベルのハードウェアしか持っていない人たちが、高級なハードウェア要件を満たさなくても、シンプルなギフやポーズを作成して（そして、うまくいくことを願って）試すことができるようになることです。

私の場合：

• 300/300ピクセル以上のポーズ用にControlNetを実行できません。
• アニメイトされたdiffとモーションモデルを使って、2フレーム/秒で4フレームを生成できません。
• 3つまたは4つのLORAを同時に実行できません。

したがって、このコンセプトは3つのLORAで構成されています：

1. waveslightleft
2. waveleft
3. wavefarleft

これらのLORAはそれぞれ、手を振る動作の1フレームまたは1段階を表しています。現在のところ、左腕のみに対応していますが、私が把握している限り、AIは気にしないようで、片方の手を振った後、いつでももう片方の手を振ることも可能です。

結局のところ、少し手作業を加えることで、同じ、あるいはそれ以上の結果を得ることができます。手順は以下のようになります：

ステップ1：開始するステージを選ぶ

どれでも構いませんが、中央に位置し、img2imgと相性が良い可能性が高い「waveleft」（普通の左腕振り）から始めるのがおすすめです。

ステップ2：img2imgで手振りを進化させる

ここが生成プロセスです。すべてのLORAを用いて、あなたが望む画像を得るまで生成を繰り返してください。

ステップ3：すべての画像を編集ソフトで組み合わせる

フレーム数は任意で構いません。さて、ここでいくつか前提条件について説明しましょう。

1. 重みは変動します。img2imgでは0.40程度の低めの値が良いでしょう。通常の生成では、使用したいステージを0.6〜0.8に設定してください。重みは使用しているモデルによります。
2. やや左に傾けると、画像の照明が変化することがあります。理由はわかりませんが、何かバッキング処理と関係しているのかもしれません。
3. 以下のタグが役立ちます：((waving left または waving far left または waving slightly left))、片手を上げる、手を振る、5本指。
4. キャラクターやスタイルのLORAとはうまく組み合わせられない可能性があります。
5. アクティベーションタグ：

• waveleft = "waving left"
• waveslightleft = "waving slightly left"
• wavefarleft = "waving far left"

このLORAの目的は、ハードウェアの制約を持つ人たちが、30分も待って粗雑な結果を得るのではなく、フレームごとに動画を作成できるようにすることです。もしファイルサイズが少し大きめでも、今の時代に比べて144MBなどという巨大なファイルではないことを喜びましょう。おそらくこれを1つのLORAに凝縮できるはずですが、テストの目的と、それがどうやって実現すべきか私自身が明確でないため、あえて分割しています。今後、さらに多くのものを作成する際に、その方法を習得できるかもしれません。