illustrious TxT2ImG with Controlnet, Detailer Deamon, Detailers and IPAdapters

詳細

ファイルをダウンロード

モデル説明

🗒️ ComfyUI用の新作Illustriousワークフロー

こんにちは、しばらく使用してきたIllustriousワークフローを共有したいと思います。
これは以前のワークフローの進化版で、こちらでご覧いただけます。

主な機能

  • 複数のディテーラー:人物、顔、目、手、胸、乳首。それぞれバイパスで個別にオン/オフ可能なので、微調整したい部分を正確に選択できます。

  • 選択可能なControlNetシステム:必要な構造やポーズ制御の際に、ControlNetグループ全体をオン/オフしたり、特定のネットを有効にできます。

  • IPAdapter統合:複数の参照画像を同時にサポートし、各画像の重みを調整可能。スタイル、照明、キャラクターの一貫性を実現します。

  • LoRAローダーグループ:LoRAパックをあらかじめ読み込み、重み付きで即座にオン/オフ切り替え可能。

  • ディテーラーデーモン:サンプラーまたはプロンプトを変更することなく、テクスチャをシャープにしたり、細部を強調したり、滑らかに調整できます。

  • ツー・サンプラーワークフロー:柔軟なデュアルサンプラー設定で、ワークフローを複雑にすることなく、追加の形状制御を可能にします。

  • メタデータ完全保存:チェックポイント、プロンプト、設定、使用したすべてのLoRAを自動保存。共有やCivitAIアップロードに最適です。

  • 自動保存:保存パスに%dateを追加すると、ComfyUIが日付ごとにフォルダを自動整理します。

  • 初心者向けバイパスアーキテクチャ:シンプルな状態から始め、必要に応じて高度な機能を1つずつオンに。過負荷なく学習できます。

  • SAM + Ultralyticsセグメンテーション対応:高品質なセグメンテーションモデルにより、ディテーラーが顔、手、体など、正確に対象を認識できます。


免責事項

私は専門家ではなく、むしろ初心者に近いです。このワークフローは、以前のワークフローを進化させたもので、その元はDigitalPastelさんやMittoshurasさんの素晴らしいワークフローを参考にし、つなぎ合わせて動くようにしたものです。

私が元にしたワークフロー:

⚠️ つまり、このワークフローで問題が発生した場合、私は十分なサポートができなかったり、全く対応できない可能性があります。
以下に簡単なステップバイステップガイドを記載しますが、今後1〜2週間のうちに、このワークフローの完全な解説記事を書く予定です。その間、問題が発生した場合は、ChatGPTが味方です(私もそうしました)。エラーメッセージをコピーして貼り付けて、粘り強く試してみてください。

あるいは、このワークフローを見て「これは何だ?」と思ったら、DigitalPastelさんのSmooth-workflowを強くおすすめします。これが私にとって最高のスタートでした。


クイックスタート

初心者でも最も簡単に画像生成を始める方法:

1. ComfyUIにワークフローを読み込む

リンクを非表示にします。このワークフローはネストが複雑です。

2. 画像生成セクション以外はすべてOFFにする

シンプルで初心者向けに保つため、またはシステムでテストするため、メインのバイパスを使って、Txt2Img以外のすべてをオフにしてください。

3. 画像保存パスを設定

画像セーバーノードで、ファイル名、保存パス、フォーマットを設定してください。

現在、画像はText2Imgフォルダ内に、作成日付のサブフォルダ(例:Text2Img/2025-12-01/filename.png)に保存されます。

4. チェックポイントを選択。

5. VAEを読み込む(必要に応じて)

本当に必要ならVAEを読み込みます。Load VAEノードをVAE Anything Everywhereノードに接続してください。(デフォルトでは、このノードはチェックポイントローダーに接続されています)

6. 2Dスライダーで画像サイズを設定。

7. ポジティブプロンプトを入力。

緑のPositive Promptノードを使用します。最初のテストではシンプルに:

“a detailed portrait of a woman, soft lighting, photorealistic”

のように入力してもOKです。より高度にしたい場合は:

  • ポジティブノードは2つの領域に分かれています。

  • 上段 = ポジティブプロンプト

  • “Select to add LoRA”でLoRAを挿入できます。

  • 形式例:

    • embedding:SmoothNoob_Quality

    • <lora:Smooth_Booster:0.5>

8. ネガティブプロンプトを追加。

ポジティブプロンプトと同様に、赤のNegative Promptを使用します。埋め込みを含めてもよいし、最初はシンプルに:

“blurry, distorted anatomy, extra limbs, bad hands”

のようにしてもOKです。

9. Queue Prompt を押す。

おめでとうございます。最初の出力が完成しました。

10. より詳細な制御をしたい?

新しいセクションを1つずつオンにしてください:

  • ディテーラー

  • ControlNets

  • IPAdapter

  • LoRAローダーグループ

このワークフローは、壊れることなく段階的に機能を拡張できるように設計されています。もし何かが壊れたとしても、簡単に元に戻せるはずです。

以下に、各機能の役割と、いつ使うべきかを詳しく解説します。



⭐ ディテーラー – 役割と使用タイミング

このワークフローには、画像の特定部分をクリーンアップ・微調整するための6つの専用ディテーラーが含まれています。それぞれバイパスでオン/オフ可能なので、必要なものだけ有効にできます。

ディテーラーは「ポストプロセスアーティスト」のような存在で、モデルが苦手とする部分を丁寧に仕上げます。


👤 人物ディテーラー

人物全体を一度に微調整。全体の形状、衣類の輪郭、髪の毛のアウトライン、主要な解剖学的特徴を整え、より専門的なディテーラーに引き継ぎます。

いつ使うべきか?

人物ディテーラーを使用するとき:

• 人物全体がぼやけて柔らかすぎる
• 衣類や体の輪郭が不鮮明
• 髪が塊のように見え、構造が弱い
• 基本レンダリングは構図が良いが、定義が弱い
• 顔・手・目をさらに細かく調整する前のクリーンな土台が欲しい

人物ポートレートや全身ショットには最適な「最初のステップ」ディテーラーです。


🙂 顔ディテーラー

顔全体(輪郭、鼻、唇、顎、表情、頬のディテール)をターゲットにします。

いつ使うべきか?

顔ディテーラーを使用するとき:

• 顔がぼやけたり、定義が不明瞭
• 表情の明確さが重要
• 皮膚のディテールを粗いアーティファクトなしに強化したい
• ポートレートスタイルの画像を作成
• 基本モデルが顔の出力が不安定

キャラクターが重要な場合は、ほぼ常にオンにすべきです。


👁️ 目ディテーラー

目はほとんどの画像の中心です。モデルはしばしば目をぼかしたり歪ませます。このディテーラーは目とまぶただけを分離し、最大限のシャープネスを実現します。

いつ使うべきか?

目ディテーラーを使用するとき:

• 目が柔らかく、左右で不均一
• 瞳のディテールが浮かび上がらない
• 睫毛がぼやけた影になってしまう
• 目の表情や強さを強調したい
• クローズアップやポートレートを生成

このディテーラーは処理負荷をほとんど増やさず、視覚的品質を劇的に向上させます。

また、ここにはチェックポイントローダーも備わっています。目に関しては、チェックポイントを組み合わせると、素晴らしいドラマチックな結果が得られることがあります。


手ディテーラー

手はAI画像生成の最終ボスかもしれません。このディテーラーはマスクを調整し、指の形状をシャープにすることで、手をコントロールします。

いつ使うべきか?

手ディテーラーを使用するとき:

• 指がぼやけたり、くっついていたり、不明瞭
• 手が目立つポーズで作成
• ジュエリー、タトゥー、小物が含まれる
• 実際の手の陰影と構造を再現したい
• 顔の近くに手が写るクローズアップ

手がフレーム内に現れるなら、このディテーラーはあなたの最良の友です。


胸ディテーラー

胸の形状、陰影、輪郭を調整。高解像度やスタイリッシュなキャラクターデザインで発生する変形やモデリングのクセを修正します。

いつ使うべきか?

胸ディテーラーを使用するとき:

• NSFW、グラマラス、露出の多い衣装を生成
• 衣服の生地が不自然にたれる
• 胸の部分に引き伸ばし、歪み、奇妙な影がある
• 滑らかな曲線と自然なハイライトを望む

オプションですが、人物中心の構図では非常に役立ちます。


🔸 乳首ディテーラー

このディテーラーはセグメンテーションモデルに強く依存し、実験が必要です。乳首領域だけを微調整し、一般的なテクスチャや配置の問題を修正しますが、モデルによって結果は異なります。

いつ使うべきか?

乳首ディテーラーを使用するとき:

• NSFWコンテンツを生成
• モデルのデフォルト乳首レンダリングが不安定
• よりシャープなディテールやリアルなテクスチャが必要
• この領域で苦手なチェックポイントを使用

モデルが乳首をすでにうまく描画しているなら、オフにして構いません。そうでないなら、試してみる価値があります。


🎛️ ディテーラーの一般的なアドバイス

• 全てのディテーラーを同時に使う必要はありません。画像に必要なものだけオンにしましょう。
• ポートレート:顔+目で最大の効果
• 全身ショット:人物+手で十分
• NSFW:胸+乳首+人物で最も強力な修正
• 画像が過剰処理に見えるなら、1〜2つをオフにしてください。

ディテーラーは、戦略的に使うときに最も輝きます。常にオンにしないでください。



⭐ ディテーラーデーモン – より賢いディテールの秘密のソース

ディテーラーデーモン(Impact Pack由来)は、サンプラーがノイズ除去中に従うシグマカーブ(ノイズスケジュール)を調整することで、画像の微調整を強化します。このカーブを制御することで、レンダリング中にいつディテールが現れるかをより精密に制御できます。

これにより:

• ノイズ除去の初期段階で構造的ディテールを追加
• 後期段階で繊細でシャープなディテールを追加し、クリーンな仕上がりに
• 過剰シャープやにごったテクスチャを軽減
• SDXL、SD1.5、FLUXなどでの全体的なテクスチャ処理を改善

これはディテールのタイミングコントローラーと考えてください。サンプラー設定に頼るのではなく、ディテーラーデーモンがディテールの流れを調整し、画像をより滑らかで、洗練され、意図的に仕上げます。

いつ使うべきか?

ディテーラーデーモンをオンにするとき:

• 画像が「柔らかすぎ」たり、定義が弱い
• ディテーラーの結果が硬すぎたり、過剰シャープに見える
• 複雑なサンプラー設定を触らずに、滑らかで一貫した微調整をしたい
• 高解像度で繊細なテクスチャの制御を強化したい
• ステップ数を増やしたり、外部のアップスケーラーを使わずに「仕上げ」を向上させたい

オプションですが、クリーンなディテールの流れに慣れると、もう戻れなくなります。

インストール方法:

Impact Packをダウンロード:
https://github.com/ltdrdata/ComfyUI-Impact-Pack

以下に配置:

ComfyUI/custom_nodes/

ComfyUIを再起動すれば、ディテーラーデーモンが利用可能になります。



⭐ ControlNets – 選択可能なシステムの導入と理解

ControlNetsはワークフローの「構造サポート」です。ポーズ、エッジ、深度、線画、スケッチなどの外部情報を使ってモデルを導きます。モデルがプロンプトを正しく解釈するのを待つのではなく、ControlNetsは正しい方向に優しく(あるいは強く)導きます。

このワークフローには選択可能なControlNetシステムが組み込まれており、すべてを整理して管理しやすいように設計されています:

• ControlNetグループ全体をオン/オフ可能
• 必要な個別のネットのみ有効化
• グラフがControlNetのスパゲッティ怪物にならないようにします

SDXL ControlNetsのダウンロード先:

https://huggingface.co/lllyasviel
https://huggingface.co/InstantX/
https://huggingface.co/thibaud
https://civitai.com — 「SDXL ControlNet」と検索

置く場所:

ComfyUI/models/controlnet/

インストール後、各ControlNet Loaderのドロップダウンメニューに自動的に表示されます。

選択システムの仕組み

  • メインの青いボックス → ControlNetセクション全体を有効/無効にします

  • 黄色いボックス → 個々のControlNetをオン/オフします

  • 画面の半分を占めるような散らかった構成ではなく、すべてが整理されて表示されます

最初はシンプルに始め、プロジェクトが必要とする場合にのみ追加のネットを有効にしてください。

⭐ ControlNetsはいつ使うべきですか?

次の場合はControlNetを有効にしてください:

特定のポーズ を求め、ランダム性と戦いたくないとき
• モデルに従わせたい参照スケッチやスケッチがあるとき
• より明確な構造、まっすぐな線、定義された形状、一貫したシルエットが必要なとき
• 意図した構図から画像がどんどんずれていくとき
• 照明やシャドウを導くために深度やエッジ情報を必要とするとき
• キャラクターの一貫性を保ち、モデルに従わせたいとき
• 巨大なプロンプトを書かずに、より多くの制御をしたいとき

これらはオプションですが、使い方に慣れるといかに強力か実感できるでしょう。
選択システムにより、必要に応じて簡単にオン/オフできます。



⭐ IPAdapter – とは? そしてインストール方法

IPAdapterは、ワークフローの参照画像解釈者です。参照画像をパイプラインに投入することで、テキストプロンプトを圧倒することなく、スタイル、構図、照明、キャラクターのアイデンティティに合わせた生成をガイドできます。

構造を強制するControlNetsとは異なり、IPAdapterはより優しく「これを少し似せてください」という影響を与えます。

このワークフローには複数のIPAdapterスロットが含まれており、それぞれに重みを設定して複数の参照を同時にブレンドできます。

IPAdapter(SDXL版)のダウンロード先:

https://huggingface.co/h94/IP-Adapter/tree/main/sdxl
SDXL用の**.safetensors**ファイルをダウンロードしてください。

CLIP Visionモデル(必須)のダウンロード先:

https://huggingface.co/laion/CLIP-ViT-H-14-laion2B-s32B-b79K

置く場所:

ComfyUI/models/ipadapter/
ComfyUI/models/clip_vision/

正しく配置すれば、IPAdapterノードに自動的に表示されます。


⭐ IPAdapterはいつ使うべきですか?

テキストプロンプトだけに頼らず、参照画像の視覚的ヒントに従って画像を生成したいときにIPAdapterを有効にしてください。

特に役立つのは以下のとき:

• キャラクターの顔、髪型、シルエットを一致させたいとき
• 複数の画像でキャラクターのアイデンティティを一貫させたいとき
• 特定の照明スタイルや色調を好みとするとき
• プロンプトだけでは望む見た目を実現できないとき
• 複数の影響をブレンドしたいとき(例:ある画像のスタイル、別の画像の照明)
• コスプレ、ポートレート、あるいは明確な似顔絵が必要なとき

IPAdapterは、厳密なControlNet構造を必要としない場合にガイドとして優れています。正確な形状を強制するのではなく、画像全体の「雰囲気」に影響を与えます。

スタイルやトーンのマッチングだけが必要な場合、IPAdapterだけで十分です。
ポーズや精密な構造が必要な場合は、ControlNetと組み合わせて使用してください。



⭐ LoRA Loader Groups – 複数のLoRAを素早く使うための最適な方法

LoRA Loader Groupsは、一括してLoRAをプリロードし、ポジティブプロンプトを汚すことなく即座にオン/オフできる機能です。スタイル、キャラクターのアイデンティティ、テーマ的な外、一括してLoRAをプリロードし、ポジティブプロンプトを汚すことなく即座にオン/オフできる機能です。スタイル、キャラクターのアイデンティティ、テーマ的な外観を素早く一貫して切り替えたいときに最適です。

毎回<lora:thinghere:0.8>のようにLoRAの重みを手動で入力する代わりに、これらのローダーを使えば:

• 複数のLoRAを一度にプリロード
• 重みを一箇所で調整
• バイパス機能でグループ全体をオン/オフ
• メインプロンプトを清潔で読みやすく保つ

各グループには、そのLoRAに関連するトリガー語、タグ、キャラクター名を保存できる便利な文字列ボックスも含まれており、プロンプトへのコピー&ペーストが素早く簡単になります。

このシステムは、プロンプトの煩雑さが大きな問題となる複雑なワークフローで特に役立ちます。


⭐ LoRA Loader Groupsはいつ使うべきですか?

次の場合はLoRA Loader Groupsを使ってください:

• アニメ、リアリズム、シネマティック、絵画的など、異なるスタイルを頻繁に切り替えるとき
• 複数のキャラクターLoRAがあり、素早く交換したいとき
• テーマバンドル(例:「サイバーパンクパック」、「ファンタジー鎧パック」)を実験しているとき
• 複数のレンダリングで一貫したLoRA重みを維持したいとき
• 長いLoRA構文でプロンプトを汚したくないとき
• 異なるLoRA構成が必要なバッチ生成を実行しているとき

このワークフローのように、モジュール式のオン/オフが基本設計原則である場合、LoRA Loader Groupsは非常に強力です。

たまに1つのLoRAを使うだけなら、ポジティブプロンプトに直接追加しても構いません。
しかし、LoRAが生成プロセスの常連であるなら、Loader Groupsは時間を節約し、一貫性を保ち、すべてを整理します。



このワークフローで誰がどんな作品を作り出すか、とても楽しみにしています。このワークフローを使って作品を作ったら、Civitaiに投稿する際は、「Gallery > Add Post」機能を通じて投稿していただけると、私のほうでもあなたの作品を見ることができます。

このモデルで生成された画像

画像が見つかりません。