Cloth Migration and dressing style transfer

ttplanetttplanet
89
1.5K
transstylecloth
v1.0

详情

下载文件

模型描述

联系我：

QQ群：571587838

Bilibili：主页

Civitai：ttplanet

微信：tangtuanzhuzhu

这是一个专注于 Stable Diffusion (SD) 模型的实验性项目。在单张生成图像中，同一物体或角色能够保持极高的视觉一致性。我此前已在 SDXL 模型中尝试解决这一问题。

当时，我通过使用具有衰减权重的 ControlNet 模型取得了良好效果。借助参考图像，可以在保持极高一致性的同时，一次性生成同一角色的多个视角。但由于时间紧张，这项工作后续的探索被搁置。

最近，我关注到关于 ic-lora 的讨论，发现它仍是一个标准的 LoRA，但利用 DIT 模型 实现了更好的一致性与图像格式控制能力。借助这种格式控制效果，有望在应用中实现一致性目标。受网友“lrzjason（别名xiaozhi）”提出的潜空间引导工作流概念启发，我简化了整个预处理逻辑，从而开发出一种高效迁移方法。

通过这一流程与方法，你可以通过引导模型聚焦于你所需的特定内容，实现令人惊讶的迁移与泛化效果，获得极强的一致性。目前，我已为服装开发了配套的迁移模型，具备以下功能：

  1. 令人惊讶的一致性参考图像服装迁移

    ComfyUI_temp_veptx_00011_

    ComfyUI_temp_bgltt_00001_

  2. 卡通服装转写为写实风格，或写实服装转写为卡通风格

    7e95939782f43a7272f2ff796f231871

  3. 通过权重控制服装相似度，激发设计创意

待开发功能

  1. 具有鲜明特征物品的迁移

  2. 复杂精细图案的迁移

  3. 面部迁移

  4. 社区提出的其他创意建议

使用方法

你可以从我的 Hugging Face 项目 中的 Migration LoRA 文件夹下载模型。目前仅提供 Cloth LoRA，其他模型将在准备就绪后陆续添加。

需求

  • 使用 ComfyUI 运行模型并启用自动流程。

  • 自定义节点：

    1. TTP Toolset：ComfyUI_TTP_Toolset （请更新至最新版本）

    2. Tag Node：我推荐使用我的版本，它提供额外的自定义修改功能：ComfyUI_JC2

    3. 我还使用了 Alimama flux 填充模型，可从这里获取：Alimama_flux_inpainint

步骤

**工作流文件在此处：workflow

**或在此处下载：/model/950776

  1. 安装 ComfyUI 以及上述所需的自定义节点。

  2. 从 Hugging Face 的 Migration LoRA 文件夹下载 Cloth LoRA。

  3. 将模型加载至 ComfyUI。

  4. 使用提供的示例工作流以获得预期效果。

  5. 请注意：需谨慎选择 flux 版本，因为我们需要同时加载 Alimama 填充模型，这将占用更多 VRAM。若感觉运行缓慢，可尝试使用 nf8 版本，或使用内存优化节点如 FluxExt-MZ

欢迎自由实验与根据需求修改工作流！

此模型生成的图像

未找到图像。