RunDiffusion XL

RunDiffusion XL Beta をリリース！

RunDiffusion.com がまた一つ、世界で最も初期のSDXLモデルを完成させました！

15,000人以上のメンバーが参加するDiscord で、プロジェクトのサポート、ベストプラクティスの共有、興奮するアップデートやニュースの発信、そして生成された素晴らしいアートの共有をお楽しみください。

なぜ？SDXLはもう十分素晴らしいんじゃないの？

はい！でも、これはさらに進化したと感じています！SDXLは、人物の見た目がプラスチックのように見える、目や手、余分な四肢の問題を抱えています。私たちはすべての問題を解決できたわけではありません（そのため「ベータ」版です）、でも、かなり近づきました！私たちはCivitai.comから Hundreds のSDXLプロンプトを（ComfyUIを使用して）テストし、パイプラインが同一であることを確認した結果、このモデルはより優れた画像を生成することを発見しました。ぜひご自身でご確認ください。

このモデルは、明示的にフルボディをプロンプトに含まない限り、クローズアップや「頭部写真」を好む傾向があります。これは望ましい特徴かどうかは不明です。ご意見をお待ちしています。

強み

• 動物、車、人物の写実性が向上。
• 別のモデル、別な生成結果。お気に入りのプロンプトで試してみてください！
• より良いポートレート。SDXLは被写体を遠くに配置しがちですが、このモデルは近くに引き寄せます。
• 目と手の再現性が少し向上（私たちのテスト結果）。
• プロンプト制御が改善。コンマを使って被写体とスタイルを分けて指定してください！

弱点

• まだいくつかの概念が「プラスチック感」を残している（例：食べ物。ただし、ご自身のプロンプトを試して、ご意見をお寄せください！）
• ときどき「人物偏向」が強すぎることがある。
• 創造性が若干制限される傾向。これは「写実的」モデルと見なせるかもしれません。でも、やはりテストしてください！
• 「スポーツカー」への偏り（笑）

RDXLはプロンプトをより正確に追従します。「上半身」と指定した場合、それに従う傾向があります。

使い方

• 通常通りプロンプトを入力してください。被写体とスタイルはコンマで区切ってください。希望する結果が得られない場合、トークンをもう一度使用してください。例：\``iron man made of lava, suit of armor infused with molten lava, ...etc` でアイアンマンが生成されない場合、`iron man made of lava, suit of armor infused with molten lava, marvel iron man super hero ...etc`` のように別の場所にトークンを追加してください。

• 標準のリファイナーまたは 1.0-0.9 リファイナーを使用してください。https://huggingface.co/stabilityai/stable-diffusion-xl-refiner-1.0/blob/main/sd_xl_refiner_1.0_0.9vae.safetensors

• ComfyUIを使用してください。

私たちのプロセス

700枚の画像の小さなデータセットを使用し、20エポックで14,000ステップ学習しました。すべての画像を可能な限り詳細なキャプションで手動でラベリングしました。結果として、SDXLは学習に対して非常に敏感であることがわかりました。私たちが行った改善は非常にエキサイティングです。SDXLの未来は明るい！

今後の計画

生成をより簡単にするために、ComfyUIをプラットフォームに統合し、メタデータ付きの画像を1クリックで生成できるようにします。これはワークフロー共有の未来であり、この機能を実現するためのサポートをくれた/u/comfyanonymousに心から感謝します。また、/u/Searge が手がけた素晴らしいSeargeSDXLにも特別な感謝を。このワークフローは素晴らしいです！（Civitai.com で生成データが使えるように協力できるでしょうか？）

今後も皆さまからのフィードバックをもとにこのモデルを継続的に改善していきます。まもなくフルリリースが予定されていますので、お楽しみに！