序文

私は、これらのモデルの最初のバージョンをバージョンv1.0で学習およびテスト目的で使用しました。同時に、パナマ帽がLoRAモデルによってどのように変更されるかについての記事を執筆しました[1]。

アプローチ

これまで、LoRAモデルの学習には_AUTOMATIC1111_と_Extension_ _TrainTrain_を使用しています。私のローカル環境では、他のLoRA学習アプローチは動作しなかったか、期待した通りに動作しませんでした。

モデルの機能

LoRAモデルは、重みを1.0に設定するとパナマ帽を作成します。

重みが1.0未満の場合は、LoRAモデルは指定された画像内のパナマ帽を変更できます。

現在、このモデルは私が期待する通りに動作していません。

トリガー語

必要なトリガー語は

panama hat

バージョン1.3では、トリガー語を

panamahat

に変更しました。

バージョン

あまりうまく動作しないバージョンはv1.0です。他の後続バージョンは並行して試すことができます。それらはより良い結果を生み出しているように感じられます。

バージョン v1.3

最大学習ステップは5000でした。500ステップごとにバージョンを保存しました。バージョンごとに試したところ、1000ステップの学習で最も良い結果が得られました。

テストケース

以下のプロンプトはLoRAモデルの良いテストケースです：

 panama hat, <lora:PanamaHatConcept_v13:[1.0...1.4]>
 panamahat, <lora:PanamaHatConcept_v13:[1.0...1.4]>

重み1.0から1.4までは動作します。1.5以上の値ではオーバーフィッティングが発生します。

以下のようなパナマ帽が得られるはずです：

学習画像

学習は20枚の画像から開始し、最終的には36枚の画像を使用しました。使用した学習画像は、パナマ帽をさまざまな視点と位置から示しています。すべての画像の背景は明るく単色です。

制限

LoRAモデルの限界について理解しておく必要があります。LoRAモデルを使用せず、ベースモデルがパナマ帽を認識していない場合、存在しないパナマ帽を変更することは不可能です。

最終的な言葉

良い一日を。モデルのテストをお楽しみください。楽しんで、インスピレーションを得てください！

参考文献

[1] https://civitai.com/articles/7481/using-lora-to-change-details-in-a-photo

寄付

Buzzをいただけると嬉しいです！黄色のBuzzは特に歓迎です！

また、250以上の暗号通貨のいずれかでの寄付も受け付けています：

https://nowpayments.io/donation/zentrocdot

その際、ドキュメントの改善やモデルの改善など、ご関心のある内容を自由にコメントしてください。私が何に興味を持っているかを把握できます。