BerryBrite (Pony)

詳細

ファイルをダウンロード

モデル説明

BERRYBRITE PD

これは、私がSDXLモデルをPony v6に変換するための二回目の試みですが、確かにかなり苦戦しました。以下にその詳細を説明します。

まず、情報をお伝えします。

V2更新版

ようやくこのモデルを完成させることができました。バージョン1よりも、オリジナルのスタイルに近づいたと思います(バージョン1の情報は下記に記載)。

V2はオリジナルのスタイルをより正確に再現していますが、いくつかの問題点と、1つの小さな変更があります。

rbrite(Rainbow Briteスタイル用)とtkid(2Dカートゥーンスタイル用)は以前と同じままです。これらのタグに対するトレーニングはうまくいきましたが、元のsberryタグ(Strawberry Shortcakeスタイル用)は、タグとの干渉が発生したため、完全に変更する必要がありました。そこで、このスタイル用に新しいsbscタグを導入したところ、うまく機能しました。

全体として、このバージョンははるかに優れていますが、一つ言わせてもらうと、「Strawberry Shortcake」というキャラクター名を使用すると、特にsbscスタイルタグと組み合わせた際に、やや「焼きすぎた」ような外観になることがあります。「Rainbow Brite」というキャラクター名でも同様の傾向が見られますが、それほど顕著ではありません。それ以外にも、人間または人型キャラクターをプロンプトに明確に含める必要があるかもしれません(特にsbscタグを使う際には、なぜか時々アンスロモードが出力されてしまうためです)。

以下に例を示します。

P.S. 上記の例における背景や色のマッチングは、データセット内の特定の画像群によるものです。プロンプトに「digital art」と「colorful background」を追加することで、同様の効果を得られる可能性があります。色合いはプロンプト内の特定の色に基づいて決まるはずです。ただし、これは十分な検証を経ていないため、その限界は不明です。

以下に記載される情報はすべてV1に関するものです。

BerryBriteは、古典的な「Rainbow Brite」と「Strawberry Shortcake」シリーズのキャラクターデザインスタイル(特定のキャラクターそのものではなく)を捉えることを目的としたLoRAであり、さらにバリエーションとして2Dのピクサー風スタイルも加えています。つまり、このLoRAは3つのスタイルを一つにまとめたものです。

このLoRAは、実は二回のトレーニング試行をマージしたもので、二回目のトレーニングでは、オリジナルのタグのうち二つがベースのPonyモデルの他のスタイルに影響を受けていたため、スタイルタグを変更しました。以下に例を交えて詳しく説明します。

とはいえ、このバージョンには特定のスタイル(特にStrawberry Shortcake)に問題がありましたが、全体としては魅力的な結果が得られていたため、共有したいと思いました。

元のモデルでは、Rainbow Brite、Strawberry Shortcake、2Dピクサー風スタイルそれぞれに対して、RBrite、SBerry、TKidの三つのタグを使用していました。しかし、「Berry」(SBerry)と「Kid」(TKid)は十分にユニークではなく、他のスタイルに影響を受けてしまいました。一方、「Brite」(RBrite)はRainbow Briteキャラクターに比較的特有ですが、それでも三つのタグすべてをrbrt、sbry、tkdに変更しました。

しかし、ご覧の通り、これにも独自の問題が生じました。オリジナルタグ「TKid」は、元のスタイルと他のベースPonyスタイルを混ぜ合わせてしまい、一方で新しいタグ「tkd」は元のスタイルに近い出力を維持しました。

「RBrite」タグはオリジナルのスタイルに近づいていましたが、プロンプトで人間または人型キャラクターを明示しない場合、より多くのアンスロモードが生成される傾向がありました。新タグ「rbrt」は、おそらくベースPonyモデル内のアンスロ/ポニー系アーティストと関連しているため、他の明示的なプロンプトを用いない限り、ポニー系のアートが優先される可能性が高いです(ただし上記の例では、使用したキャラクタータグが人型に傾いていたため、その影響が顕著ではなかった)。

「SBerry」と「sbry」タグに関しては、オリジナルのStrawberry Shortcakeスタイルはほとんど失われており、お気づきかもしれませんが、「SBerry」タグはランダムなベリーを混ぜ込んでしまう傾向があります。これらのタグは、ベースPonyモデル内のアンスロ/ファンタジー生物アーティストから影響を受けているように見えますが、それでも十分に魅力的なスタイルです。

また、特定のキャラクタータグ「Rainbow Brite」や「Strawberry Shortcake」を使用すると、面白い結果が得られることにも気づきましたが、これらはオリジナルキャラクターと完全に一致するものではないことを覚えておいてください。

たとえStrawberry ShortcakeキャラクタータグとSBerryまたはsbryスタイルタグを同時に使用しても、オリジナルのスタイルとは程遠い結果になります。しかし、決して悪いというわけではありません。

今後のトレーニングでは、このタグを完全に見直してStrawberry Shortcakeスタイルを再現しようと試みます。しかし今のところ、これが限界です。

「Rainbow Brite」キャラクタータグについては、おそらくご推測の通り、Rainbow Dashポニーキャラクターからの影響を受けています。いくつかの画像には、彼女のカーティーマークを付けようとする試みさえ見られます。

また、単純に楽しむためにポニーキャラクタータグも追加しました。このモデルはPonyモデルですからね。

これらのスタイルをより正確に再現できるようにトレーニングを改善できれば、このモデルを更新します。それまでは、お楽しみいただければ幸いです。

私のすべてのモデルは、他のトレーニングやマージに使用可能です。

このモデルで生成された画像

画像が見つかりません。