By Night Portraits

私はベラドンナです。これは私の最初のLoRAです。（前回何かをトレーニングしたのは、キャラクターごとに完全なDreamboothモデルを構築しなければならなかった頃でした。覚えていますか？それはたった1年ちょっと前のことでした。）

これは、Stable Diffusionでより良い吸血鬼を作りたいという私の探求の成果です。長く続く『ダークエイジズ：ヴァンパイア・ザ・マスカレイド』のチャーンクルでプレイヤーを務めてきた私は、Stable Diffusionの「まあまあ」な吸血鬼のイメージ（XLでも）や、Midjourneyにおけるキャラクターの似顔絵とスタイルの間での常なる引き合いに辟易していました。そこで、Civitaiのトレーニングコンテスト（私は締め切りぎりぎりで間に合いませんでしたが）の動機づけを受けて、MJのスタイルとSDの似顔絵の柔軟性を組み合わせるLoRAの作成にようやく着手しました。

そしてこれがその成果のバージョン1です。

これは何をするものですか？

「By Night Portraits」の目的は、ワールド・オブ・ダークネス的な、絵の具が飛び散り、血まみれの、ダークファンタジーの絵画スタイルを固定し、ユーザーがスタイルと似顔絵のトレードオフに頭を悩ませることなく、キャラクターの細部に集中できるようにすることです。

吸血鬼用に作られたものですが、吸血鬼や血を指定せず、他の色を用いてリクエストすれば、より夢幻的なムードを出してくれます（非吸血鬼の例をご覧ください）。フル強度で使うと、ユーザーのプロンプトに何を書いたとしても、絵の具や筆跡が至るところに散らばった、カッコいい衣装のダークな吸血鬼キャラクターを生成しようとします。その点はご注意ください。

ポーズはポートレート中心で、ハーフショットから3/4ショット、絵の具の飛び散り、歴史的な雰囲気の衣装（中世からビクトリア朝あたりまで）を好みます。

トレーニング方法

このLoRAは、何百回もの生成のうちから100枚を手動で厳選したMJのポートレートを基に構築しました。それ以前にも、一貫性と再現性のあるスタイルを確立するために、数え切れないほどの試行錯誤を重ねました。

複数の失敗したトレーニングガイドを参考に、うまくいく設定をかき集めたため、設定の詳細はやや曖昧ですが、おそらく繰り返し回数は2回、バッチサイズは8、エポックは8で、3090 Tiを使ってトレーニングしました。合計で約11時間かかりました。私はこのガイドや、The AllyのPatreonガイドも参照しました。

使い方

ほとんどの例は、LoRAを異なる強度で呼び出して作成しました。スタイルを強化したい場合は、splatter style、textured backdrop、blood splatter、paint splatter and dripsなどのトークンを追加すると、スタイルがより明確になります。

強度は0.5〜0.9の間をお勧めします。プロンプトの内容に応じて調整してください。一般的には、シンプルなプロンプトには高め、複雑なプロンプトには低めに設定するとよいでしょう。高すぎると、細部をすべて飲み込んでしまい、プロンプトを無視する可能性があります。

いくつかの例（定番の「メカアーマーの男性」など）と、ベースモデルとLoRA適用後の比較を提供しています。すべてSDXLベースモデルで、リファイナーを15%のステップで使用していますが、高解像度アップスケーリングやimg2imgは一切使用しておらず、すべてtxt2imgの出力です。

他のモデルや他のLoRAとの組み合わせでの動作例はまだ用意していませんが、今後対応する予定です。初期の試行では他のモデルでも動作するようですが、プロンプトを無視してしまう傾向があり、強度を下げた方がよい可能性があります。

多くの例では、私のユーバン・ファンタジー用ワイルドカード（いずれ公開する予定です）を利用しています。「By Night Portraits」と組み合わせると、両者で一貫したダークエイジズのキャラクター生成器として十分に機能します。

意図しない使用方法

キャラクターポートレート以外のプロンプトにも、興味深い結果を生み出します。ぜひお試しください。以下をご覧ください：

プロンプト： 暗く濃い霧の森の中にいる、ドラゴンとクモの巨大なハイブリッドモンスター、lora:splatter_lora:1

今後の予定

今後のバージョンで対応したいこと：

• 他のモデルや他のLoRA、より多様な設定での、より多くの／より良い例を追加

• 多様性の向上（悪くはないが、改善の余地あり）

• 装備、アーマー、衣装の種類に対する理解の向上

• キャラクターをカートゥーン化することなく、より多くの吸血鬼特徴（歯、光る目、爪、痩せこけた蒼白な肌）を追加。ただし、単なる蒼白なゾンビにしないよう注意

• より現代的／ゴシック・パンクなトレーニングを追加し、現代の『ヴァンパイア・ザ・マスカレイド』スタイルのポートレートに対応（V1でも可能だが、より良くしたい）

• フルボディのトレーニングを追加し、よりダイナミックなアクションポーズに対応（V1は主にポートレートポーズを理解）

• 吸血鬼の「一族」（V:tM風）または少なくとも吸血鬼の「スタイル」（野生的、怪物的、ドラキュラ風貴族、社交界人、暗殺者、血の魔術師など）の概念をトレーニング

• 他にも！理想としては、他の超自然的存在（ Werewolves、Changelings、Magesなど）にも展開し、一貫したポートレート「スタイル」を育成したいと考えています。もっと野心的になれば、『ワールド・オブ・ダークネス』、『トゥルーブラッド』、『キャスティルニア』、『ザ・マジシャンズ』、『スーパーナチュラル』などに特化した完全にファインチューニングされたユーバン・ファンタジー・モデルを作りたいと思っています。ただし、どうなるかはまだわかりません。

V1を使ってあなたが何を作ったか、ぜひ見せてください！自分が提供した例はできるだけ多く載せましたが、私は世界で最も創造的なプロンプターではありません。異なるキャラクターや意図しない使い方に対する反応を知りたいです。データが多いほど、V2で何を改善すべきかが明確になります。

質問や意見、何かうまく動かない点、改善案があれば、遠慮なくお知らせください。ありがとうございました。どうぞお楽しみください！（さあ、吸血鬼を生み出しましょう！）