IllusPony

これはIllustrious 2.0とPony Modelのマージであり、Illustrious 2.0の欠点を排除することを目的としています。

ホットな意見

正直、Illustrious 2.0は過剰に評価されています。これはDanbooru画像データセットのみで学習されており、ポルノ制作に非常に適していることを意味しますが、2000万画像のデータセットに対してバッチサイズ512でエポック2までしか学習されておらず、何一つ特別に優れている部分がありません。あらゆることに手を出すタイプで、ポーズすら正しくできません。アーティスト名に対して非常にバイアスがかかっており、それを使いこなす必要があります。古い画像が大量に含まれているため、実際のレンダリング結果がセルシャドウカラーになり、アニメモデルには不向きです。Ponyモデルはそれを少し改善しましたが、適切に学習される必要があり、その名前はモデルが実際に示す内容を正確に反映していません。

マージを試行錯誤している際、異なるレイヤーを複数試し、多数のモデル構成を検証しましたが、正直なところ、半分以上のレイヤーはNaNを生成するだけで無意味でした。有効なレイヤーはわずかに以下の通りです：

XLのMID 1,2,3：これらの3つのレイヤーがスタイル、形状、色にやや影響を与えます。

Out 7,6,5,4
In 9,8,7,6
これらを活用して調整できます。

全体として、Pony、Autism、NAIなどに基づいて学習されたほとんどのLoRA（およびバリエーション）は全く役に立ちません。

これは、アーティスト名がモデルの学習に大きな影響を与えているからです。

学習率として4e-5が採用されています。これはキャラクターとスタイルの学習の間の適度な値ですが、実際にはアーティストのスタイルのみを学習したにすぎず、この点で倫理的な問題があります。なぜなら、「{XXX}のアートスタイル」と明示的に指定しなければならないからです。その結果、包括的な用語は一切使用できなくなりました。