Embroidered Quilting TI XL

詳細

ファイルをダウンロード

モデル説明

2024年7月3日

TI(テキストの逆転)埋め込み(プロンプトで8つのトークンを使用)により、刺繍されたキルト画像を生成します。SDXLのトレーニングデータには、キルティング、刺繍、縫製、布アートに関連する Craft の画像がそれなりに含まれていたようですが、新しい画像を一貫して生成するための適切な表現を見つけるのが難しかったため、既存のコンテンツをより一貫して活用するためのTIを作成してみました。これは、ベースのSDXLおよびベースからあまり離れていないチェックポイントで動作します。

初期バージョンは、ベースのSDXL v1.0で学習済みです。

トリガー語は「cs-qu1lt-1」です(「i」ではなく「1」に注意)。ただし、.safetensorsファイルの名前を変更するだけで簡単に変更できます。変更する際は、SDXLがすでに知っている実在の単語は避けてください。

注意点:

* TIは、トレーニング画像にこのようなボーダーが存在しないにもかかわらず、画像の周囲に(布製の)ボーダーを生成することが多いです。これは、本物のキルトアートによく見られる特徴であり、SDXLが元々学習した画像の性質によるものです。

* 単純なプロンプトでは、主にキルティングに加えて一部の刺繍が生成され、複雑なプロンプトではより多くのステッチや刺繍が含まれます。

* 他のシーンがキルティングであっても、人物(顔・手・肌)は写真のように描かれることがあります。これは、SDXLが多数の写実的な画像で学習されたためだと推測されます。

* 一部の情况下、TIは平面的なキルト画像ではなく、キルティングされた要素とそうでない要素が混在した3Dシーンを生成することがあります。

* 対象技術の性質上、写実的なプロンプトと比較して、画像は簡略化されます。

TIトリガーだけをプロンプトに使用すると、ランダムなキルティング/刺繍風の風景が生成されます。どれかはシーン、どれかはパターンのように見えるでしょう。より明確なプロンプトを試したところ、以下の形式が一般的にうまく機能しました:

TIトリガー、シーンの説明、補足説明

例:

cs-qu1lt-1, summer meadow with hills in the background, sunny, puffy clouds

cs-qu1lt-1, Victorian drawing room, fireplace, mirror, Christmas

cs-qu1lt-1, sailing dinghy on a lake, distant mountains, stormy sky

プロンプト内でTIトークンを右に動かす(またはその重みを減らす)と、キルティングされたシーンから布や縫製要素を含むシーンへと変化します。これらの一部は非常に興味深く、テスト中にすっかり夢中になってしまいました :-)

テストおよび公開画像は、Forgeバージョン:f0.0.17v1.8.0rc-latest-276-g29be1da7で作成しました。

公開画像は、10個のシンプルなプロンプトと10個の複雑なプロンプトから生成されたものです。

サンプラー:テストでは以下がよく機能しました:

DPM++ 2M Karras 25<--->50ステップ。テスト時は一般的に30または40ステップを使用

CFGスケール:5<--->10。テスト時は一般的に6または7を使用

詳細を少し向上させるため、ほとんどの場合Hires.fixを1.25または1.5で使用しました。

Hires.fixステップ:15<--->25、4x_NMKD_Siax_200kまたはお気に入りのモデル、ノイズ除去:0.4

公開画像では、その他の調整器、ControlNet、i2i、ポストプロセッシングは一切使用していません。

テスト中は、ネガティブプロンプトをできるだけシンプルに保ちました。例:

closed eyes,signature,logo

このTIとよく組み合わせられるチェックポイントモデル:

Magie_Noire v4

/model/505656?modelVersionId=612138

Crystal Clear XL

/model/122822/crystal-clear-xl

Clarity XL

/model/471585/clarity-xl

ZavyChromaXL v8

/model/119229?modelVersionId=563988

一部のチェックポイントは、追加のTIやLoRAなしで布工芸用語に良好に反応します。良い例が@MarielleのMagie_Noireシリーズです:

/model/505656

私はこのTIを使用せずにMagie_Noire ver3でいくつかの例を公開しています:

https://civitai.com/posts/4011537

[PUBLISHEDTOCIVITAIONLY]

このモデルで生成された画像

画像が見つかりません。