ControlNet Mysee - Light and Dark - Squint Illusions Hidden Symbols Subliminal Text QR Codes
详情
下载文件
关于此版本
模型描述
欢迎提供反馈!我仍在改进此模型,您可以通过生成简单用例并讨论结果来帮助我。仅训练ControlNet就已经够一个人忙的了 :)
更新:我为使用我的ControlNet创建了一个赏金任务!
概述
通过使用白-灰-黑控制图像来控制图像的明暗区域。我不希望再创建另一个与Monster Labs模型竞争的二维码模型,因为他们的模型已经非常出色。我的想法是更专注于自然和有机的图像,用以实现“眯眼幻觉”效果,而非二维码,并更注重人类的感知方式,而非相机如何解读对比度。您会注意到,条件图像中的白色会更偏向于浅色(HSV),而不是纯白色(RGB)。我也发现Monster Labs模型倾向于生成对比度更高的图像,可能是为了更好地适配二维码。虽然此模型也能生成可扫描的二维码,但这并非其设计目标。
使用方法
根据您的图像构想,设置 strength=0.6-0.8,start_percent=0-0.1,end_percent=0.6-1.0。通常我发现,与其它二维码模型相比,需要使用更低的ControlNet强度。建议制作一个XYZ图,尝试不同的start、end和权重强度,以了解它们对生成效果的影响。您也不必局限于白-灰-黑图像,还可以使用灰度图或RGB图像。我还发现,微调过的模型能产生更具艺术性的结果。
模板
我准备了一份不同模板的集合,您可以下载以快速上手:

训练方法
如果您想训练自己的ControlNet,请参阅我的文章:Play in Control - ControlNet训练设置指南
该模型使用laion2b-en-aesthetics65数据集进行训练,通过HSV方法将图像转换为灰度图,使用核大小为15的高斯模糊,并将颜色重新映射为33%的白-灰-黑。我的想法是将现有图像想象成由白-灰-黑图案图像生成的。

版本
- v0.4:210000a32 个样本,mixed_precision="fp16"
- v0.3:130000a4 个样本,mixed_precision="fp16"
- v0.2:180000a4 个样本,mixed_precision="fp16"
- v0.1:68000a4 个样本,mixed_precision="no"
我将根据使用情况和反馈继续改进并训练新版本。
参考资料
教程
Antfu - 艺术二维码
Saigo - 艺术二维码
Takin - 隐藏文字
灵感来源
Rob Gonsalves
reddit - Spiral Town
reddit - 隐藏标志
reddit - 轮廓幻觉 1
reddit - 轮廓幻觉 2
reddit - 潜意识符号
antfu - 风格化二维码
QRBTF(画廊与生成器)
工具
类似模型
/model/111006/qr-code-monster
/model/90940/controlnet-qr-pattern-qr-codes
/model/80536/lighting-based-picture-control-controlnet
/model/90472/controlnet-qr-code
感谢antfu提供的深入文章,以及Monster Lab团队的QR Code Monster模型,正是这些作品激励我投身于ControlNet训练!

















