Flux Controlnet Upscale

详情

下载文件

模型描述

此工作流使用 Flux 上采样 ControlNet(https://huggingface.co/jasperai/Flux.1-dev-Controlnet-Upscaler)对提供的图像进行上采样。使用 Florence 2 为图像生成描述,以实现自动提示。

使用 Kijai 的脚本(https://huggingface.co/Kijai/flux-fp8/discussions/7#66ae0455a20def3de3c6d476)将 ControlNet 转换为 fp8 格式,以便 Flux(fp8)和 ControlNet 能够适应 16GB 显存。

工作流重要说明

  • 如果您不是在上采样照片,请跳过“文本查找与替换”节点。

  • 输出图像的尺寸由输入图像的宽高比和“缩放到兆像素”节点中的兆像素数值控制。为获得最佳效果,请将此值设置在 1 至 2 之间。

  • ControlNet 强度应设置在 0.5 至 0.6 之间。

  • end_percent 可用于控制上采样结果对原始图像的忠实程度:数值越高,越忠实于原图;数值越低,模型越有创作自由度。

  • Reddit 用户 axior 报告称,在将图像上采样至 8 兆像素时,使用 Flux + 上采样 ControlNet 方法,ControlNet 强度设为 0.85,生成过程进行到 0.85 时,降噪值设为 0.95,效果良好。

模型

  1. flux1-dev-fp8-e4m3fb.safetensors(models/diffusion_models/flux):https://huggingface.co/Kijai/flux-fp8/tree/main

  2. t5xxl_fp8_e4m3fn_scaled.safetensors(models/clip):https://huggingface.co/comfyanonymous/flux_text_encoders/tree/main

  3. ViT-L-14-BEST-smooth-GmP-TE-only-HF-format.safetensors(models/clip):https://huggingface.co/zer0int/CLIP-GmP-ViT-L-14/tree/main

  4. Flux.1-dev-Controlnet-Upscaler(models/controlnet):https://huggingface.co/jasperai/Flux.1-dev-Controlnet-Upscaler,已使用 Kijai 的脚本(https://huggingface.co/Kijai/flux-fp8/discussions/7#66ae0455a20def3de3c6d476)转换为 fp8 格式,适用于 16GB 显存用户。

  5. Flux VAE:通过管理器安装

自定义节点

  1. ComfyUI-Florence2 by Kijai

  2. WAS Node Suite

  3. comfyui-art-venture

  4. rgthree's ComfyUI Nodes

  5. KJNodes for ComfyUI

此模型生成的图像

未找到图像。