XL Clothturn Helper XL Remix

*每一个点赞、评论和帖子都会支持我走得更远！

你可以在我的 Patreon 上找到更多项目文件/细节/工作流程：Chamber | 制作游戏与艺术 | Patreon，也欢迎在那里提供进一步支持~
订阅能帮助我持续更新并创作更多内容~

混音版本使用稳定扩散（Stable Diffusion）输出的图像进行训练，
而普通版本则使用3D模型渲染的图像。
我稍后会尝试合并版本。
在我看来，这并非普通版本的更新版，因此我在这里新建了一个帖子。

我没有手动修正或标注稳定扩散的输出图像，但我认为这将在未来版本中带来极大帮助，
目前太忙了，无法尝试（嗯……太穷了，我得先专注做点能谋生的事），
这只是通过自动标注选取的原始图像快速制作的占位版本。
训练数据：RemixTrain.zip，
训练设置：RemixTrain.zip，
如果你赶时间，可以参考以上信息自行改进

!!! 使用 clothturn helper 1.5 生成的图像作为 canny 输入，权重设为约 0.3，可显著提升质量，并充分利用 SDXL 对提示词更强的理解能力!!! （就像大多数展示图一样，你可以对比提示词与结果，太棒了！我稍后会将这些结果合并训练成 LoRA 来简化流程~）

计划、未来、即将推出……

- [ ] 更多来自3D模型渲染测试的数据（约100张，若有改进会发布）
- [ ] 更多步骤测试（约5000步，若有改进会发布）

- [ ] 更好的标签和提示词测试（包括通配符，若有改进会发布）
- [ ] charturn（及其他人的转盘）用于 SDXL/SD1.5 的 TI
- [ ] charturn（及其他人的转盘）混音版，适用于 SD1.5 和 SDXL，
基于约60张精选生成图像，尝试让输出更美观（若有改进会发布），
相对于当前基于20-50张3D模型渲染图像、旨在多视角校正的版本
- [ ] charturn 的年龄/体型/身高/服装轮廓/面部控制测试（若有改进会发布）
- [ ] 我的 LoRA/模型将公开发布，而我的训练/生成工具/工作流程仅发布在我的 Patreon 上

我尝试了 XL CKPT/LoRA 来改善手部/手掌/手指、头发/头盔/面罩和服装，
对于可控元素/风格、数量和一致性，确实有一些提升，你可从上述样本中感受到，
我感觉的主要改进是模型对提示词有了更好的理解，例如某些服装和角色，能通过更细致的提示词更精准地控制输出。

但经过训练和测试后，我认为 SDXL 目前（2024年3月22日）仍存在一些短板：

最主要的是，目前优秀的 XL checkpoint 和 XL LoRA 数量不足，无法达到 SD 1.5 的效果，
无论是用于风格偏移等设计工具，还是作为基础/美化模型的美感水平。
开源姿态控制器（open pose controller）的 XL 版本不如 SD 1.5 版本。
训练和生成速度更慢、更困难
（每张1536*1024图像放大至1920*1024后，开启 ADetailer 处理4个面部，需4-5分钟，实际上若加入手部改进可能效果更好，但太慢了，无法在 ADetailer 中添加超过10个手掌），
而轻量版本虽然更快，但目前结果仍不够理想。

我对 XL CKPT 不够熟悉，且目前训练成本似乎过高，因此我选择支持其他优秀创作者，等待更好的成果，
至于更多 XL LoRA 工具，我稍后会做些研究和尝试~

好消息：RTX 4080 笔记本电脑（12GB 显存）在调整部分设置并更新 kohya_ss 后，已足够训练 XL LoRA！

!!! 如果你想要类似的效果，
请重复上述原始样本中的大部分生成/采样设置，
包括 ControlNet（OpenPose）以及其他人的 LoRA，
不同的额外 LoRA/TI 各有其独特作用，可增减测试以匹配你的目标~

这是我为新工作流程、AI驱动设计和纹理工具（基于摄像机投影）训练的 LoRA 之一。

适用于 SD XL：

Clothturn Helper XL - v1.0 | Stable Diffusion LoRA | Civitai

Charturn Helper Merged XL - v1.0 | Stable Diffusion LoRA | Civitai

适用于 SD 1.5：

它们与我未来在 Blender 中的字符库配合效果最佳，
包括3D模型的网格形状编辑指南、自动纹理/着色、权重绘制等……
主要为创建我的游戏资产而设计，
或许也能帮助像我这样的独立开发者。

个人推荐的检查点（目前测试后仅有一个适合 SDXL）：
AbyssOrange XL Else - v1.0 | Stable Diffusion Checkpoint | Civitai

此外，训练数据也在此提供，约30%来自我之前创作并发布的艺术作品渲染图 3D模型 by ChamberSu1996 - Sketchfab，
其余为从互联网购买和收集的：TrainDataPack.zip
每个 LoRA 均由一个相对较小的数据集训练而成（早期测试版仅含20~50张图像），但目前仍非常有帮助。

我为每个 LoRA 创建的 kohya_ss 训练设置，仅更改了数据、图像尺寸和训练轮次，其余均相同（开启 XL 选项）：ToonHairTurn_v1.json
（建议你尝试自己的更好数据和设置，因为我目前对训练不够熟悉，这次只是尽量让每个步骤/功能可运行，并保持设置尽可能简单/默认，
之后我会进一步学习合理数据、标签和训练设置，
再仅使用我自己的艺术渲染图进行训练，以确保可公开使用，并符合我的风格与审美。）

添加来自 Civitai 的动态提示词与通配符，可获得无限多样的结果，
使用 Gemini 和 Chat GPT 生成提示词通配符进行测试效果也很好~

如有任何问题或对你有吸引力的内容，欢迎通过留言或邮件联系我：[email protected]

另外，我的 Discord 频道在此：
https://discord.gg/SFJFcctfgD

每一个点赞、评论、帖子和 Patreon Chamber | 制作游戏与艺术 | Patreon 的订阅，
都能帮助我获得预算，持续更新、创作更多内容并发布！

模型类型	LORA
基础模型	SDXL 1.0
发布时间	3/27/2024

XL Clothturn Helper XL Remix

详情

下载文件

关于此版本

模型描述

此模型生成的图像