Jurdn's Model Sculptor for ComfyUI

详情

下载文件

模型描述

ComfyUI - Jurdns 模型雕刻器

一组 ComfyUI 节点,通过基于梯度的修改对不同层和模块进行“雕刻”,从而改造扩散模型。利用数学曲线与形状,为您的模型创造独特的艺术效果、增强放大时的细节,或探索创意模型变体。

它能做什么?

与传统合并两个模型的方式不同,模型雕刻器在单个模型的各层上应用数学梯度形状。可以将其想象为对模型的“深度”施加曲线或波纹模式——使某些层更强,其他层更弱,在整个网络中形成影响的高峰与低谷。最适合用于精细化处理或放大阶段以实现细节增强。

使用场景

🔍 迭代放大与精细化

在您的放大工作流中使用模型雕刻器,以增强细节恢复能力。在不同放大阶段应用不同的梯度形状,突出精细细节、纹理或特定艺术元素。

🎨 创意模型融合流程

不使用传统合并方式,而将模型雕刻器作为合并前的预处理步骤,或将其应用于已合并的模型,以创建传统混合无法实现的独特变体。

⚡ 动态工作流增强

将其集成到您现有的工作流中,使同一基础模型在不同任务中表现不同——例如肖像与风景、精细与风格化等场景。

安装

  1. 进入您的 ComfyUI 自定义节点目录:

    cd ComfyUI/custom_nodes/
    
  2. 克隆本仓库:

    git clone https://github.com/jurdnf/ComfyUI-JurdnsModelSculptor.git
    

也可在 ComfyUI Manager 中找到。

本帖还包含一个 .zip 压缩包,可直接解压至 comfyui/custom_nodes 目录。

  1. 重启 ComfyUI

节点将在节点浏览器的 models/advanced 分类下显示。

可用节点

  • Jurdn 的模型雕刻器(Flux) — 适用于 Flux.1 模型

  • Jurdn 的模型雕刻器(SDXL) — 适用于 SDXL 模型

  • Jurdn 的模型雕刻器(SD3) — 适用于 Stable Diffusion 3 模型

上述架构的微调版本(如 Illustrious,其基于 SDXL)

如何使用

  1. 连接您的模型:将“加载扩散模型”节点直接连接到模型雕刻器节点

  2. 选择梯度形状:定义效果在各层中的变化方式

  3. 设置强度:通常为 0.05–0.3(用于细微效果),更高值用于显著变化

  4. 选择目标模块:聚焦于模型的特定部分

  5. 连接输出:像平常一样连接到采样器

重要:始终直接从模型加载器连接,以避免累积效应。

梯度形状说明

每种形状在模型各层上创建不同的“影响曲线”:

  • 线性(上升/下降) — 平缓上升或下降

  • 缓入/缓出(二次) — 平滑加速/减速曲线

  • 缓入/缓出(正弦) — 自然、平滑的波浪式过渡

  • 尖峰(高斯) — 中间层出现锐利峰值

  • 凹陷(反高斯) — 中间层为谷底,边缘区域增强

  • 阶梯 — 层间离散级数变化

  • 随机(噪声) — 不可预测的变化,适用于实验性效果

目标模块

Flux 模型

  • in_layers — 输入处理层

  • double_blocks — 主 Transformer 模块(0-18)

  • single_blocks — 次级 Transformer 模块(0-37)

  • Double & Single(同步形状) — 对两种模块应用相同梯度

SDXL 模型

  • input_blocks — 下采样路径(0-11)

  • middle_block — 瓶颈处理层

  • output_blocks — 上采样路径(0-11)

  • time_embed — 时间步嵌入

  • label_emb — 类别/风格嵌入

  • Input & Output(同步形状) — 对称应用

SD3 模型

  • joint_blocks — 主 DiT Transformer 模块(0-23)

  • x_embedder — 图像嵌入层

  • y_embedder — 文本嵌入层

  • t_embedder — 时间嵌入层

  • pos_embed — 位置嵌入

  • final_layer — 输出投影

  • Joint & Final(同步形状) — 聚焦核心处理

提示与最佳实践

  • 从细微开始 — 初始强度设为 0.1 左右,再逐步调整

  • 尝试组合 — 不同形状适用于不同内容

  • 用于放大 — 在多阶段放大工作流中效果尤为显著

  • 直接连接 — 始终从“加载扩散模型”直接连接,避免效果叠加

  • 尝试不同模块 — 每种模块影响生成的不同方面

此模型生成的图像

未找到图像。