UmaMusume All In One LoRA

这是 Uma Musume 的 SDXL AIO LoRA 的 pony-uaf 版本。

推荐设置

• LoRA 权重：1.0

• 触发词

  • [角色名] \(umamusume\) 或 [角色名]

  • 例如：

    • manhattan cafe \(umamusume\)

    • hayakawa tazuna

设置

• 适用于 Stable Diffusion XL Pony V6

  • 请参考 pony 的生成指南。

• SDXL-Pony 版本

• 使用 kohya_ss 的 sd-scripts 和 KohakuBlueleaf 的 LyCORIS 训练

  • 非常感谢所有人！

• 基础模型：Pony Diffusion V6 XL

• 硬件：4x A6000 48GB

• 训练时长：39 小时

• 数据集：ULTIMA 数据集 + 知识截止至 2024-04（即将上传）

  • 包含合成自然语言描述，比例为 1:1

  • 最大 Token 长度：225

• 分辨率：1024x1024

  • 长宽比分桶

• 维度、Alpha：32

  • 算法：LoCon

  • 网络丢弃率 = 0.1

• 优化器：Lion8bit

  • 权重衰减 = 0.1，betas = (0.9, 0.95)

• 步数：10,777（13 个周期）

• 总批量大小：64

  • 4 个 GPU × 8 批量大小 × 2 梯度累积步数

• 学习率：

  • U-Net：8e-5

  • 文本编码器 1：4e-5

  • 文本编码器 2：4e-5

  • 前 100 步升温至 1e-4，之后保持恒定学习率

• 学习率调度器：带升温的恒定学习率

• 最小 SNR gamma：5

• 噪声偏移：0.0357