[UPDATED JUN 30] Flux Fill Inpainting With SD 1.5 Refiner

详情

下载文件

模型描述

这是一个相对简单的流程,充分利用了Flux团队新推出的fill模型。到目前为止,这是我见过的最出色的实现。Flux fill的主要问题是过度平滑所有内容,因此我使用了SDXL精炼器来尝试恢复真实感和细节,结果非常出色。它还具备使用Grounding DINO + SAM的自动遮罩功能,效果相当不错,节省了我进行图像修复的时间。此外,它原生支持LoRA,让你能够实现一些非常具体的应用场景。到目前为止,我尚未看到任何自定义的Flux fill检查点,因此我目前使用的是官方默认版本,但我希望这一情况能很快改变。

这是我第一个项目,我希望能设计得用户友好且简单,希望我做到了这一点。文档中有一段非常详细的说明,试图解释如何使用它,但如果你之前用过ComfyUI,我认为你应该能很快理解。此流程使用了大量自定义节点和多个模型,以下是我使用的模型列表:

Flux模型:

  • flux1_fill_dev
  1. VAE模型:

    • flux_vae (ae.safetensors)
  2. 加载CLIP节点(Flux):

    • clip_l

    • t5xxl_fp8_e4m3fn

  3. Grounding DINO模型:

    • GroundingDINO_SwinT_OGC (694MB)
  4. SAM模型:

    • sam_vit_h (2.56GB)
  5. SD 1.5图像修复模型:

    • 任何SD 1.5图像修复模型均可正常使用。

    • 推荐:Realistic Vision Inpaint

请在下方留下任何反馈或疑问,我会尽力解答。该流程目前仍处于测试阶段,但这是该项目的第六次迭代,我认为已经达到了可发布状态。谢谢!

此模型生成的图像

未找到图像。