XL Mechaturn Helper XL Remix
详情
下载文件
关于此版本
模型描述
*每一个点赞、评论和帖子都会支持我走得更远!!
你可以在我的 Patreon 上找到更多项目文件/细节/工作流程:Chamber | 创建游戏与艺术 | Patreon,也欢迎在那里提供进一步支持~
订阅能帮助我持续更新并创作更多内容~
混音版本使用稳定扩散输出的图像进行训练,
而普通版本则使用3D模型渲染的图像。
我稍后会尝试合并版本。
在我看来,这并不是普通版本的更新版,所以我在这里新建了一篇帖子。
!!! 使用身体转向辅助器生成的图像作为Canny输入,权重设为约0.2,可大幅提升质量,并充分利用SDXL对提示词更强的理解能力!!!(就像大多数展示图一样,你可以对比提示词和结果,太棒了!我稍后会将这些结果合并训练成LoRA以简化流程~)
计划、未来、即将推出……
- [ ] 从3D模型渲染测试中获取更多数据(约100张,如有改进会发布)
- [ ] 更多训练步数测试(约5000步,如有改进会发布)
- [ ] 更好的标签和提示词测试(包括通配符,如有改进会发布)
- [ ] charturn(及其他人的转盘)用于SDXL/SD1.5的TI训练
- [ ] charturn(及其他人的转盘)SD1.5和SDXL的混音版,
基于约60张精选生成图像,尝试让输出更美观(如有改进会发布),
与当前基于20-50张3D模型渲染图像、旨在多视角校正的版本相关
- [ ] charturn年龄/体型/身高/服装轮廓/面部控制测试(如有改进会发布)
- [ ] 我的LoRA/模型将公开发布,而我的训练/生成工具/工作流程仅发布在我的Patreon上
我尝试了XL CKPT/LoRA方案,以改善手部/手掌/手指、头发/头盔/面罩和服装,
针对可控元素/风格、数量和一致性,确实取得了一些改进,你可以从上述样图中感受到,
我感受到的主要提升是模型对提示词的理解更好了,比如某些服装和角色,能更精准地通过提示词细节控制输出结果,
但在训练和测试后,我认为SDXL在现阶段(2024年3月22日)仍有一些不足:
最主要的是,目前优秀的XL检查点和XL LoRA数量不足,难以达到SD 1.5的效果,
无论是用于风格偏移等设计工具,还是作为基础/美化模型的美感水平开放姿态控制器XL的表现不如SD 1.5版本
训练和生成更慢更困难
(每张1536*1024图像放大到1920*1024后,开启ADetailer处理4张人脸需4-5分钟,实际上加入手部改进可能生成更好结果,但太慢了,无法在ADetailer中添加超过10个手掌),
而轻量版虽然运行更快,但当前结果对我来说仍不够理想。
我对XL检查点不熟悉,且目前训练成本似乎过高,因此我选择支持其他优秀创作者,等待更好的成果出现,
对于更多XL LoRA工具,我稍后会进行研究和尝试~
好消息:RTX 4080笔记本电脑(12GB显存)在调整部分设置并更新kohya_ss后,足以训练XL LoRA!
!!! 如果你希望获得类似结果,
请重复上述原始示例图片中的大部分生成/采样设置,
包括ControlNet(OpenPose)和其他人的LoRA,
不同的额外LoRA/TI各有其独特作用,可增减它们以测试哪种组合最符合你的目标~
以下是我为新工作流程、AI驱动设计和纹理工具(基于摄像机投影)训练的LoRA之一。
适用于SD XL:
Clothturn Helper XL Remix - v1.0 | Stable Diffusion LoRA | Civitai
Bodyturn Helper XL - v1.0 | Stable Diffusion LoRA | Civitai
Clothturn Helper XL - v1.0 | Stable Diffusion LoRA | Civitai
Charturn Helper Merged XL - v1.0 | Stable Diffusion LoRA | Civitai
适用于SD 1.5:
- Charturn Helper Merged - v4.0 | Stable Diffusion LoRA | Civitai
- Bodyturn Helper - v3.0 | Stable Diffusion LoRA | Civitai
- Faceturn Helper - v2.0 | Stable Diffusion LoRA | Civitai
- Hairturn Helper - v1.0 | Stable Diffusion LoRA | Civitai
- Clothturn Helper - v1.0 | Stable Diffusion LoRA | Civitai
- Mechturn / Armorturn Helper - v1.0 | Stable Diffusion LoRA | Civitai
- Sword Gen - v1.0 | Stable Diffusion LoRA | Civitai
它们未来将与我在Blender中的角色库配合使用,
包括3D模型网格形状编辑指南、自动纹理/着色、权重绘制等……
主要为创建我自己的游戏资产而设计,
或许也能帮助像我一样的独立开发者。
个人推荐检查点(目前测试后仅有一个适用于SDXL):
AbyssOrange XL Else - v1.0 | Stable Diffusion Checkpoint | Civitai
此外,训练数据在这里,约30%来自我之前创作并发布的艺术作品,
其余为从网络购买和收集:TrainDataPack.zip
每个LoRA在本早期测试版本中均基于约20~50张图像的小型数据集训练,但效果依然显著。
我为每个LoRA创建的kohya_ss训练设置,仅在数据、图像尺寸和训练轮次上不同,其余设置完全一致(开启XL选项):ToonHairTurn_v1.json
(建议你尝试自己的更好数据和设置,因为我目前对训练尚不熟悉,这次仅希望让每个步骤/功能可运行,并尽可能保持设置简单/默认,
后续我会深入学习合理数据、标签和训练设置,
再仅使用我自己的艺术渲染图像进行训练,以确保可公开使用并符合我的风格与审美)
添加来自Civitai的动态提示词和通配符,可获得无限多样的结果,
使用Gemini和Chat GPT生成提示词通配符进行测试也效果良好~
如有任何问题或对以上内容感兴趣,欢迎通过留言或邮件联系我:[email protected]
还有我的Discord频道:
https://discord.gg/SFJFcctfgD
每一个点赞、评论、帖子和Patreon Chamber | 创建游戏与艺术 | Patreon 订阅,都能帮助我获得资金,持续更新、创作更多内容并发布!




















