XL Mechaturn Helper XL Remix

すべての「いいね」、コメント、投稿が、私のさらなる進歩を支えてくれます!!

Patreonでさらに多くのプロジェクトファイル/詳細/ワークフローをご覧いただけます：Chamber | ゲーム・アート制作 | Patreon、そこでのさらなる支援もよろしくお願いします～
サブスクリプションがあれば、さらにアップデートし、より多くのコンテンツを作成できます～

リミックス版は、Stable Diffusionの出力画像を用いてトレーニングしています。
通常版は、3Dモデルのレンダリング画像を使用しています。
後ほどマージ版も試してみます。
個人的には、これは通常版の更新版ではなく、新しい投稿として作成しました。

!!!ボディターンヘルパーで生成した画像をCanny入力として約0.2の重みで使用すると、品質が大幅に向上し、SDXLのプロンプト理解能力の恩恵を大きく受けることができます!!!（多くのショーケース画像と同様です。プロンプトと結果を比較してみてください、素晴らしいです！これらの結果をLoRAにマージして、後で簡略化する予定です～）

計画、今後、まもなく登場予定…

- [ ] 3Dモデルレンダリングテストからのさらに多くのデータ（約100枚）（改善あれば投稿します）
- [ ] ステップ数の追加テスト（約5000ステップ）（改善あれば投稿します）

- [ ] より良いタグとプロンプトテスト（ワイルドカードを含む）（改善あれば投稿します）
- [ ] Charturn（その他の方のターンテーブル）用のSDXL/SD1.5向けTI
- [ ] Charturn（その他の方のターンテーブル）用のリミックス版、SD1.5とSDXL両対応、
約60枚の選定生成画像を基に、出力の美しさを向上させる試み（改善あれば投稿します）
これは現在の20～50枚の3Dモデルレンダリング画像を基にしたマルチビュー補正目的のバージョンに関連しています
- [ ] Charturnの年齢・体型・身長・スーツ輪郭・顔制御テスト（改善あれば投稿します）
- [ ] 私のLoRA/モデルは公開しますが、トレーニング/生成ツール/ワークフローはPatreonでのみ公開します

XL CKPT/LoRAを試し、手・掌・指、髪・ヘルメット・マスク、衣装の制御性、量、一貫性を向上させました。
これらの要素は一部改善され、上のサンプルから感じ取れると思います。
私が最も感じた改善点は、プロンプトの理解力が向上したこと——たとえば特定の服やキャラクターについて、プロンプトの詳細で出力をより正確に制御できるようになったことです。

しかし、トレーニングとテストを経て、私はSDXLには現時点（2024年3月22日）でいくつかの課題があると考えています：

まず、SD1.5ほどの高品質な結果を得られるような、素晴らしいXLチェックポイントやXL LoRAが十分に存在しないことです。
スタイルオフセットのようなデザインツールとしても、ベース/美化モデルとしての美しさレベルとしてもです。
Open PoseコントローラーのXL版は、SD1.5版ほど優れていないです。
トレーニング・生成が遅く、難しいです。
（15361024画像を19201024にアップスケールし、4つの顔に対してADetailerを有効化すると4～5分かかります。手の改善があればより良い結果が出るかもしれませんが、ADetailerで10枚以上の掌を追加するのはあまりにも遅すぎます）
一方、軽量版は速いですが、今のところ私の要求する品質には達していません。

私はXLチェックポイントに詳しくなく、現在のトレーニングコストは高すぎるため、他の優れたクリエイターを応援し、より良い結果を待つことにします。
さらに多くのLoRA XLツールについては、後で調査・試行してみます。

良いお知らせ：RTX 4080搭載ノートPC（12GB VRAM）は、kohya_ssの設定と更新を少し行えば、XL LoRAのトレーニングに十分です！

!!! 同じような結果を得たい場合、
上記の元画像のサンプルで使われている大部分の生成/サンプリング設定を再現してください。
ControlNet（OpenPose）および他の人のLoRAも含みます。
異なる追加LoRA/TIにはそれぞれ独自の効果があるため、ターゲットに合うよう追加・削除して試してみてください～

以下は、私の新しいワークフロー、AI駆動のデザインおよびテクスチャ（カメラベースのプロジェクション）ツール用にトレーニングしたLoRAの一つです。

SD XL用：

Clothturn Helper XL Remix - v1.0 | Stable Diffusion LoRA | Civitai

Bodyturn Helper XL - v1.0 | Stable Diffusion LoRA | Civitai

Clothturn Helper XL - v1.0 | Stable Diffusion LoRA | Civitai

Charturn Helper Merged XL - v1.0 | Stable Diffusion LoRA | Civitai

SD 1.5用：

これらは、今後私のBlender上のキャラクターライブラリと最高の相性を発揮します。
3Dモデルのメッシュ形状編集ガイド、自動テクスチャ/シェーディング、ウェイトペイントなども含みます～
主に、自分のゲーム開発用アセット作成を目的として設計されており、私と同じ独立開発者の方々にも役立つはずです。

個人的推奨チェックポイント（現在のテストでSDXLに適した唯一のもの）：
AbyssOrange XL Else - v1.0 | Stable Diffusion Checkpoint | Civitai

また、トレーニングデータはここにあります。その約30%は、私が以前作成・投稿したアートワークからレンダリングしたものです：3Dモデル by ChamberSu1996 - Sketchfab
残りはインターネットから購入・収集したものです：TrainDataPack.zip
この初期テストバージョンの各LoRAは、20～50枚程度の小さな画像コレクションからトレーニングされていますが、それでも非常に役に立っています。

私の作成した各LoRAのkohya_ssトレーニング設定は、データ・画像サイズ・エポックのみを変更し、それ以外はすべて同じです（XLオプションを有効化）：ToonHairTurn_v1.json
（自分自身のより良いデータと設定を試すことをお勧めします。私は現在トレーニングに詳しくなく、今回はすべてのステップ/機能を動作可能にすることに集中し、設定を可能な限りシンプル・デフォルトに保っています。
今後、適切なデータ、タグ、トレーニング設定について学び、将来的には自分のアートワークレンダリング画像のみを使用して、より良いLoRAをトレーニングし、オープン利用と自分のスタイル・趣味に準拠させます。）

Civitaiの動的プロンプトとワイルドカードを追加すると、無限の異なる結果を得られます。
GeminiやChatGPTを使ってプロンプトワイルドカードを生成し、テストするのもうまくいきます～

何かご質問や興味のある点がございましたら、コメントを残すか、[email protected] までご連絡ください。

また、Discordチャネルはこちら：
https://discord.gg/SFJFcctfgD

すべての**「いいね」、コメント、投稿、Patreon** Chamber | ゲーム・アート制作 | Patreon のサブスクリプションは、さらにアップデートし、新しいコンテンツを作成・投稿するための資金を支援してくれます～

モデルタイプ	LORA
ベースモデル	SDXL 1.0
公開日	3/30/2024

XL Mechaturn Helper XL Remix

詳細

ファイルをダウンロード

このバージョンについて

モデル説明

このモデルで生成された画像