XL Mechaturn Helper XL

*「いいね」「コメント」「投稿」すべてが、私の活動をさらに後押ししてくれます！！

Patreonでより多くのプロジェクトファイル／詳細／ワークフローをご覧いただけます：Chamber | ゲーム・アート制作 | Patreon、こちらでもご支援をお願いします～
サブスクリプションがあれば、さらなる更新や新作の制作が可能になります～

!!!ボディターンヘルパーで生成した画像をCanny入力として約0.2の重みで使用すると、品質が大幅に向上し、SDXLのプロンプト理解力の恩恵を大きく受けることができます!!!（ほとんどのショーケース画像と同じように、プロンプトと結果を比較してみてください。素晴らしいです！今後、これらの結果をマージしてLoRAにトレーニングして、より簡略化します～）*

計画、今後の予定、まもなく公開予定…

- [ ] 3Dモデルレンダリングテストからさらにデータを追加（約100枚）（改善あれば投稿します）
- [ ] ステップ数のテストをさらに実施（約5000ステップ）（改善あれば投稿します）

- [ ] タグとプロンプトの改良テスト（ワイルドカードを含む）（改善あれば投稿します）
- [ ] Charturn（その他の方のターンテーブル）のSDXL/SD1.5用TI
- [ ] Charturn（その他の方のターンテーブル）のSD1.5とSDXL両対応リミックス版、約60枚の選別生成画像を元に、出力の美しさを向上させる試み（改善あれば投稿します）
　（現在のバージョンは20～50枚の3Dモデルレンダリング画像を元にマルチビュー補正を目的としています）
- [ ] Charturnの年齢／体型／身長／スーツ輪郭／顔コントロールテスト（改善あれば投稿します）
- [ ] 私のLoRA／モデルは一般公開しますが、トレーニング／生成ツール／ワークフローはPatreon限定で公開します

XL CKPT/LoRAを用いて手／掌／指、髪／ヘルメット／マスク、衣装の品質向上を試みましたが、
コントロール可能な要素／スタイル／量／一貫性において、ある程度の改善が見られました。上のサンプルで感じていただけると思います。
私が感じた主な改善点は、プロンプトへの理解力の向上です。例えば特定の衣装やキャラクターについて、プロンプトの細部で出力をより正確に制御できるようになりました。

しかし、トレーニングとテストを経て、SDXLには現時点（2024年3月22日）でいくつかの課題があると感じています：

まず、SDXL用の優れたチェックポイントやLoRAが十分に不足しており、SD 1.5ほどの品質を実現できていません。
スタイルオフセットなどのデザインツールとしても、ベース／美化モデルとしての美しさのレベルとしてもです。
OpenPoseコントローラーのXL版は、SD 1.5版ほど優れていない。
トレーニングや生成が遅く、困難です。
（1536×1024を1920×1024にアップスケールし、ADetailerで4つの顔を処理するのに4～5分かかります。手の改善を加えるとより良い結果が出る可能性がありますが、ADetailerで10枚以上の掌を処理するには遅すぎます）
一方、軽量版は速いですが、今のところ私の基準では出力のクオリティが十分ではありません。

私はXLチェックポイントに精通しておらず、現在のところトレーニングは高コストに感じられます。そのため、他の優れたクリエイターを応援し、より良い結果が出てくるのを待ちたいと思います。
今後、SDXL用の追加LoRAツールについては、調査・試行していきます～

良いお知らせ：RTX 4080搭載ノートPC（12GB VRAM）でも、kohya_ssの設定を調整・アップデートすれば、XL LoRAのトレーニングが可能です！

!!! 同じような結果を得たい場合、
上記の生画像サンプルから生成／サンプル設定のほとんどを再現してください。
ControlNet（OpenPose）および他の方のLoRAも同様です。
異なる追加LoRA／TIにはそれぞれ独自の効果があるため、目標に応じて追加・削除して試すことをお勧めします。

以下は、私の新しいワークフロー、AI駆動のデザインおよびテクスチャ（カメラベースのプロジェクション）ツール用にトレーニングしたLoRAの1つです。

SD XL用：

Clothturn Helper XL Remix - v1.0 | Stable Diffusion LoRA | Civitai

Bodyturn Helper XL - v1.0 | Stable Diffusion LoRA | Civitai

Clothturn Helper XL - v1.0 | Stable Diffusion LoRA | Civitai

Charturn Helper Merged XL - v1.0 | Stable Diffusion LoRA | Civitai

SD 1.5用：

これらは、今後のBlender上のキャラクターライブラリと最適に連携します。
3Dモデルのメッシュ形状編集ガイド、自動テクスチャ／シェーディング、ウェイトペイントなども含みます～
主に、自分自身のゲーム開発用アセット作成を目的として設計されており、私と同じような独立開発者の方々にも役立つはずです。

個人的に推奨するチェックポイント（現時点でSDXL用で唯一適しているもの）：
AbyssOrange XL Else - v1.0 | Stable Diffusion Checkpoint | Civitai

また、トレーニングデータはこちら：そのうち約30％は私が以前作成・投稿したアートワークからレンダリングしたもので、残りはインターネットで購入・収集したものです：TrainDataPack.zip
今回の初期・テスト版では、各LoRAは20～50枚程度の少量データからトレーニングされていますが、それでも十分な効果を発揮しています。

そして、私が作成した各LoRAのkohya_ssトレーニング設定は、データや画像サイズ、エポック以外はすべて同じです（XLオプションをオンにします）：ToonHairTurn_v1.json
（自分自身でより良いデータや設定を試すことをお勧めします。私は現在トレーニングには不慣れで、今回は各ステップ／機能を動かすことに集中し、設定をできるだけ単純・デフォルトに保ちました。
今後、適切なデータ・タグ・トレーニング設定について学び、自作アートのレンダリング画像のみを使って、より良いLoRAをトレーニングし、オープン利用と私のスタイル・嗜好に準拠させます）

Civitaiから動的プロンプトとワイルドカードを追加することで、無限の異なる結果を得られます。
GeminiやChatGPTを使ってプロンプトワイルドカードを生成すると、テストにも非常に効果的です～

何かご質問や興味のある点があれば、コメントまたはメール [email protected] でお気軽にお問い合わせください。

またDiscordチャネルはこちら～
https://discord.gg/SFJFcctfgD

Every like, comment, post, and Patreon Chamber | creating Game, Art | Patreon Subscriptions can help to get the budget to update further, create more, and post them~

モデルタイプ	LORA
ベースモデル	SDXL 1.0
公開日	3/30/2024

詳細

ファイルをダウンロード

このバージョンについて

モデル説明

このモデルで生成された画像