Flux-1.dev.fp8 + ControlNet Canny

このガイドを書いている時点では、ComfyUIをmasterからxlabs_flux_controlnet（Gitブランチ）に切り替えることでしか、ControlNet Cannyを試すことができません。

では、必要な準備に入りましょう：

前提条件

UNET flux-dev-fp8 をダウンロードしてmodels/unetに保存してください：
https://huggingface.co/Comfy-Org/flux1-dev/blob/main/flux1-dev-fp8.safetensors
（これだけが動作します。xlabs.ai やその他のモデルは使えません）
VAE ae モデルをダウンロードしてmodels/vaeに保存してください：
https://huggingface.co/black-forest-labs/FLUX.1-schnell/blob/main/ae.safetensors
CLIPSをダウンロードしてください：
t5xxl_fp16.safetensors
clip_l.safetensors

（お使いのマシンのVRAMが32GB未満の場合、オプションで）
t5xxl_fp8_e4m3fn.safetensors

ダウンロード先：https://huggingface.co/comfyanonymous/flux_text_encoders/tree/main
これらのファイルをComfyUI/models/clip/に保存してください

1 UNET + CLIP - グループ

1：現在のところ唯一動作するflux1-dev-fp8.safetensors（Comfy.org）https://huggingface.co/Comfy-Org/flux1-dev/blob/main/flux1-dev-fp8.safetensorsと、Flux-1用のデュアルCLIPローダーを読み込みます。
2：UNETのみが必要な場合は1を選択、UNET + flux_realism_loraが必要な場合は2を選択します。
3：SetNodeを使って、ノードスプラインの混乱を避けるためにいくつかのグローバル設定を行います。

2 ベース画像 - グループ

3 プロンプト - グループ

1：Florence2を使用して画像からテキストを生成します。
2：String FunctionでFlorenceのキャプションと汎用プロンプトを結合し、コンディショニンググローバル変数PROMPT_POS-CONDに渡します。

4 CNET - グループ（ControlNet）

シード：688106326432651

Cnet 0.76：顔がカメラを向いていて、とても良い画像
Cnet 0.77：頭を上げて、依然として良い画像
Cnet 0.78：CNetが急激に作用し、腕が崩れる

LoRA：
強力なため、値は低めに保ってください。

u/comfyanoymus および素晴らしいComfy.org プロジェクト・コミュニティに心より感謝します。

Img2Img Flux1-dev-fp8 + CNet Canny