LoJack-Flux Pack

详情

下载文件

模型描述

LojackFlux 工作流包

一套基于 Flux 的高级工作流,结合了 ComfyUI 的遮罩与调度系统,并增强自定义运动遮罩和提示管理功能。

仓库:[DJZ-Workflows/Lojack-Flux](https://github.com/MushroomFleet/DJZ-Workflows/tree/main/Lojack-Flux)

概述

本工作流包将 ComfyUI 的遮罩与调度功能适配至 Flux1 Schnell 流水线,提供强大工具,实现对 LoRA 应用与模型权重的精确控制,从而生成复杂的图像。

包含的工作流

1. LojackFlux-Mask

- 实现带有自定义运动遮罩的动态遮罩系统

- 支持使用黑白几何图案视频生成遮罩

- 集成目录索引选择器,用于运动遮罩管理

- 支持静态图像与动画序列的帧选择

![LojackFlux-Mask 工作流](https://raw.githubusercontent.com/MushroomFleet/DJZ-Workflows/main/Lojack-Flux/images/Lojack-Flux-Mask.png)

2. LojackFlux-Schedule

- 实现对 LoRA 和模型权重应用的时间控制

- 非常适合在不同风格或模型间创建平滑过渡

![LojackFlux-Schedule 工作流](https://raw.githubusercontent.com/MushroomFleet/DJZ-Workflows/main/Lojack-Flux/images/Lojack-Flux-scheduling.png)

3. LojackFlux-ComboBreaker

- 结合遮罩与调度两大功能

- 支持多阶段、高精度控制的复杂图像生成

![LojackFlux-ComboBreaker 工作流](https://raw.githubusercontent.com/MushroomFleet/DJZ-Workflows/main/Lojack-Flux/images/lojack-flux-ComboBreaker.png)

主要功能

自定义集成系统

- Zenkai 提示列表:简化提示管理

- 项目文件路径系统:组织化文件处理与输出管理

- 运动遮罩系统

- 基于目录的遮罩选择

- 帧级控制

- 支持静态与动画输出

- 运动遮罩资源请访问:[Lonely-Drivers-Pack](https://huggingface.co/mushroomfleet/Lonely-Drivers-Pack)

遮罩系统

遮罩系统允许您:

- 将不同 LoRA 应用于图像的特定区域

- 在不同区域混合多个模型权重

- 使用动态运动遮罩生成复杂图案

- 自动处理未映射区域,防止伪影

调度系统

实现对以下内容的精确控制:

- LoRA 的时间性应用

- 模型权重过渡

- 随时间调整强度

- 与运动遮罩动画的集成

动画功能与插值

帧插值工具

![插值工具预览](https://raw.githubusercontent.com/MushroomFleet/DJZ-Workflows/main/Lojack-Flux/images/lojack-interp-tool.png)

本工作流包包含专为增强动画序列设计的插值工具,提供:

- 防闪烁处理:内置机制减少帧间不必要闪烁

- 平滑过渡:智能帧插值,实现流畅运动

- 批量处理:高效处理整个动画序列

- 帧率控制:灵活调整输出动画的 FPS

- 质量控制:在插值质量与处理速度之间取得平衡

该插值系统可与遮罩和调度工作流无缝协作,支持:

- 平滑不同 LoRA 应用之间的过渡

- 减少基于遮罩动画的伪影

- 从调度的权重变化中生成更自然的运动

- 以一致质量处理多个动画片段

此工具特别适用于:

- 创建长动画序列

- 使用运动遮罩过渡

- 在单个动画中合并多种风格变化

- 将帧序列转换为平滑视频输出

技术细节

条件系统

- 支持多组条件对(正向/负向)

- 自动遮罩验证与组合

- 为未映射区域提供默认条件回退

- 兼容其他控制方法(如 ControlNet)

权重管理

- 动态 LoRA 强度控制

- 模型权重插值

- 支持多个并发 LoRA

- 自动处理 CLIP 与模型权重

高级技术特性

- 钩子链式连接:通过可链接钩子支持多个 LoRA

- 灵活钩子组合:不同区域可使用不同钩子链

- 自动钩子应用:通过 apply_to_conds 简化条件处理

- 强度控制

- 对 LoRA:标准强度调节

- 对模型作为 LoRA:强度为 1.0 时完全应用目标模型权重

- 支持基础模型与目标模型之间的加权平均

使用提示

![Lonely Drivers 运动遮罩示例](https://raw.githubusercontent.com/MushroomFleet/DJZ-Workflows/main/Lojack-Flux/images/lonely-drivers.gif)

1. 安装

- 从以下地址克隆或下载:[https://github.com/MushroomFleet/DJZ-Workflows/tree/main/Lojack-Flux](https://github.com/MushroomFleet/DJZ-Workflows/tree/main/Lojack-Flux)

- 将工作流放置于 ComfyUI 的 workflows 目录中

2. 遮罩生成

- 从 [Lonely-Drivers-Pack 仓库](https://huggingface.co/mushroomfleet/Lonely-Drivers-Pack) 下载运动遮罩

- 解压至 "ComfyUI\input\DJZ-Lonely-Drivers-Pack\" 文件夹

- 使用黑白视频图案生成动态遮罩

- 使用多个遮罩时确保完全覆盖

- 利用默认条件处理未映射区域

3. 调度

- 精心规划权重过渡

- 使用渐进式强度调整以获得平滑效果

- 与运动遮罩结合以实现动态效果

4. 文件管理

- 将运动遮罩组织在指定目录中

- 使用 Zenkai 提示列表以获得一致结果

- 遵循项目文件路径结构管理输出

系统要求

- Flux1 Schnell 流水线

- 最新版 ComfyUI

- 结构正确的运动遮罩目录

- 兼容的 LoRA 模型

- 来自 Lonely-Drivers-Pack 的运动遮罩资源

备注

- 基于 ComfyUI 原生遮罩与调度系统

- 专为 Flux1 Schnell 流水线优化

- 兼容所有标准 Stable Diffusion 模型

- 增强了自定义运动遮罩集成

资源

- 工作流包https://github.com/MushroomFleet/DJZ-Workflows/tree/main/Lojack-Flux & /model/1021516/lojack-flux-pack

- 运动遮罩https://huggingface.co/mushroomfleet/Lonely-Drivers-Pack

运动遮罩示例

- 本包包含 56 个运动遮罩

![示例 1](https://raw.githubusercontent.com/MushroomFleet/DJZ-Workflows/main/Lojack-Flux/images/example1.gif)

![示例 2](https://raw.githubusercontent.com/MushroomFleet/DJZ-Workflows/main/Lojack-Flux/images/example2.gif)

![示例 3](https://raw.githubusercontent.com/MushroomFleet/DJZ-Workflows/main/Lojack-Flux/images/example3.gif)

致谢

将原始 ComfyUI 遮罩与调度系统适配至 Flux 流水线,并增加自定义功能与集成。

https://blog.comfy.org/masking-and-scheduling-lora-and-model-weights/

运动遮罩由 Lonely-Drivers-Pack 提供。

此模型生成的图像

未找到图像。