[SD1.5] ColorSplash - V-prediction Vibrant Anime Mix

詳細

ファイルをダウンロード

モデル説明

警告:ここにはドラゴンがいる!

このモデルのCLIPはModel Toolkitと互換性がありません。Model Toolkitを使用してこのモデルをチェックまたはプリューンしないでください。これはモデル自体を破壊せずに実行することは不可能です。詳細は この記事 をご覧ください。

また、このモデルはzSNRとV-predictionを使用しています。.yaml構成ファイルをダウンロードし、モデルと同じフォルダーに配置してください(A1111/Forge用);またはComfyUIではModelDiscreteSamplingノードをご使用ください。

このモデルとは?

ColorSplash(プレビュー画像では以前「ColorStorm」と呼ばれていましたが、現在はより良く動作するように再構築されました)は、v-predictionを過度な品質低下なしにマージできるかをテストするために作成されたStable Diffusion 1.5のマージモデルです。私は動作させるために継続的に改善中です。

このモデルの使い方?

プロンプト:

このモデル(私のテストでは)booruタグを非常にうまく使用しますが、自然言語はまれにしか使用できません。

スタイルはこのモデルでは影響を与えにくいです。プロンプトの単語数が少ない場合、モデルはクリーンでシャープですが、単語が増えれば増えるほど歪みが増します。この問題を克服するために、Hi.res fixを強く推奨します

多くのアニメチェックロポイントと同様に、このモデルも女性偏向がありますが、それを補正することは可能です。

このモデルは主にComfyUIのプロンプトパーサーとreForgeのデフォルトパーサー(.yaml構成ファイル使用)でテストされています。

キャラクター認識は非常に人気のあるキャラクターにはよく機能しますが、それ以外はそれほどではありません。9th Tailのキャラクター学習は劣化していますが、完全に失われていません。ConcoctionMixのHololiveおよびAIOMonsterGirlの使用もやや劣化していますが、完全に失われていません。注記:Suzuranの複数の尾が滲出することがあります。

このモデルはフューリー系コンテンツにも意外と優れています。なぜかはよくわかりませんが…

また、「茶色化(brown-outs)」はマージされた知識に触れたときに発生します(ほとんどの場合画像が茶色く tint されますので、注意してください。

パラメーター:

(太字で示したものはテスト済みで、比較的安定して動作しています)

  • サンプラー + スケジューラ:ほぼすべてのオプションが動作しますが、一部茶色化が発生します。最良の解決策は Euler beta、DPM++ 2M beta です。代替推奨:Euler aDPM++ 2M SGM UniformDPM AdaptiveUniPC simpleDDIM(ddim_uniform使用)DPM++ SDE BetaKarrasスケジューラは全く使用できません。これはv-predictionモデルの唯一の問題かもしれません。

  • ステップ:20以上

  • CFG:4–12(推奨範囲:4–6、7–12は使用可能ですがアーティファクトが発生します)、RescaleCFGを推奨

  • CLIP Skip:1〜2

  • 解像度:3:2アスペクト比でテスト済み、ベース解像度768以下(640、512)は使用可能です。

  • Hi.res fix:強く推奨。1.5倍の潜在空間アップスケールでテスト済み

マージレシピ:

ColorSplash-v0.1

この画像はComfyUI形式でのColorSplash-v0.1マージレシピのすべてを示しています。comfy-mechaおよびComfyUI-DareMerge [適切には使用していません] を使用。画像内にメタデータが含まれています。

これは単純なTIESマージ(k=0.9)で、以下のモデルを使用:

  • モデルA:9th Tail - main_v0.3

  • モデルB:ConcoctionMix-a1 [Vodka]

  • モデルC:ConcoctionMix-a2 [Vermouth]

ColorSplash-v0.1.1

V0.1.1は、CLIPを一切変更する必要がないため、comfy-mechaのみを使用しています。

画像が読めない人のために説明すると、これは4つのモデルを用いた2段階マージです:

  • モデルA:ColorSplash - v0.1(当初はConcoctionMixの実験用として作成)

  • モデルB:AIOMonsterGirl - v4(より一貫性のある知識移転)

  • モデルC:OpenSolera - a6 [Fleur](同じアイデア)

  • モデルD:FluffyRock Unleashed - v1.0 Base(同じアイデア)

ステップ1:A-x-A法で差分学習(xはモデルB、C、またはD)

ステップ2:ドロップアウト付きTIES和(k=1)を計算し、それをモデルAに追加

ColorSplash-v0.1.2

このモデルで生成された画像

画像が見つかりません。