Waifu Painting (JWW)

详情

模型描述

仅适用于 SD2.x 模型,例如 Waifu Diffusion 1.5,对 SD1.x 模型(如 Anything、AOM、Counterfeit 等)无效。

一种绘画风格 LoRA,基于 Waifu Diffusion 1.5 beta2 训练而成,训练数据来自 John William Waterhouse 的绘画作品(从维基百科收集了 69 张图片),几乎无标签。

训练时使用了噪声偏移 = 0.1,因此会与其他无噪声偏移的 LoRA 冲突。

此外,它生成纯风景的效果不佳,因为 John William Waterhouse 是一位纯粹的“美少女”与神话主题画家,其所有画作都包含人物主体(我曾尝试通过 v2 版本修复此问题)。

训练参数:
v1 版本:UNet 和 text_encoder 的学习率均为 1e-5,调度器为常数 + 预热。图像重复次数 = 10。

v2 版本:学习率相同,但使用了增强数据。我裁剪出仅包含背景的画作部分(例如:https://files.catbox.moe/ad6tyo.png),并加入训练集。

v3 版本:不再将背景部分裁剪为新图像,而是将主体部分清除。但此方法效果似乎不理想。

此模型生成的图像

未找到图像。