War and Diffusion: WARHAMMER 40K

在遥远未来的黑暗悲惨中，唯有战争……以及扩散。

NSFW 动漫版本请见此处

前言

战争与扩散（WnD）是我《战锤40K》微调项目发布的首个版本。

v1 是一个示例模型。

本次发布（WnD-v1）基于完整数据集的样本（不足一半）进行训练。完整模型已历经多次更改，仍在持续训练中。

尽管示例模型存在局限性，但我仍决定发布它，以填补 SDXL 微调生态中的空白——目前 SDXL 缺乏足够的微调模型，导致模型融合的可能性极为有限。

请我喝杯咖啡 ❤

https://ko-fi.com/ndimensional

所有捐赠将用于资助新 Stable Diffusion 微调模型与开源 AI 工具的开发。

简介

基础模型： SDXL-v1.0

数据集： 子集，约为完整 WH40K 数据集的四分之一。标注文本由我正在开发的 MLLM（非 GPT4v/o）系统生成，随后通过人工评估及我正在研发的幻觉检测项目进行验证。

VAE： sdxl-vae-fp16-fix

宽高比： 一般建议，非完整列表。

1344x768 (16:9)
1536x640 (21:9)
1152x896 (4:3)
1216x832 (3:2)
1024x1024 (1:1)
1024x704 (11:16)
768x1344 (9:16)
896x1152 (3:4)
832x1216 (2:3)
704x1024 (16:11)

训练硬件： 两块 A100 加速器。

已知局限性：

WnD-v1 的能力不及最终完整版。不过，它已较好地学习了大量战锤40K 特有的概念。

注意： 部分本应出现在示例模型中的概念并未包含，这是由于我在构建训练子集时出现错误，误指向了旧版数据集。幸运的是，我已知缺失的两个概念有对应的 LoRA：Aeldari、Necron。

接下来几周，我将重新开始，使用最新数据集从零开始微调新版本。

提示词使用

支持自然语言提示、标签提示和混合提示。

提示：

开始提示时，指定你希望生成的媒介（如 数字插画、绘画、照片等）。
我所使用的数据集版本存在一个缺陷：标题中 Skull 一词被过度使用。为此，建议对 skull 和 skulls 标记使用注意力/强调以降低其权重，例如：[[skull]]。此问题已在后续数据集版本中修复，未来发布将不再出现。
同样，由于 WnD-v1 使用的是完整数据集的小样本，部分概念的细节未被充分学习。例如，使用 Death Korps of Krieg 和 gasmask 提示时，可能生成正确的 Krieg 士兵，但头盔错误。为解决此问题，请尝试增加或减少相关标记的注意力，或直接删除该标记。在某些情况下，模型已学会该概念，额外标记反而造成冗余。同样，这些问题在未来版本中将不再出现。
描述多个角色时，请分别描述他们彼此的相对位置与外观。例如：一幅描绘了“殉道圣女修会”圣女与“血鸦战团”太空陆战队员的插画。圣女站在太空陆战队员左侧。她穿着<圣女的描述>。太空陆战队员则<太空陆战队员的描述>。然后默默祈祷。
- 标签提示则较难处理。我认为后续数据集版本中我已找到解决方案。目前建议：先输入第一个角色的标签，后接描述该角色的标签；接着输入第二个角色的标签，再接描述其的标签。例如：插画，圣女，黑色修女动力装甲，短发，爆弹枪，和太空陆战队员，血鸦战团，暗红动力装甲配黑与奶油色肩甲，重型爆弹枪，等等。
关于画面构图——建议在提示末尾描述构图方式。此建议对自然语言提示适用性较弱，但对标签/混合提示有效。
若使用艺术家标签，请将艺术家名称置于提示的最末尾。