Emilia (Lapis Re:LiGHTs)

详情

模型描述

  • 由于 Civitai 的服务条款,部分图片无法上传。完整的预览图片请参见 HUGGINGFACE
  • 此模型包含两个文件。如果您使用的是 a1111 的 WebUI v1.6 或更低版本,您必须同时使用这两个文件!!!。如果您使用的是 WebUI v1.7+,则像普通 LoRA 一样仅使用 safetensors 文件即可。
  • 精简后的角色标签为:long_hair、purple_hair、hair_between_eyes、red_eyes、bangs、breasts、purple_eyes。当角色的核心特征(例如发色)不够稳定时,您可以在提示词中添加这些标签
  • pt 文件推荐权重为 0.7–1.1,LoRA 权重推荐为 0.5–0.85。
  • 图片是使用一些固定提示词和基于数据集聚类的提示词生成的,随机种子已被使用,排除了人为挑选。您看到的就是您能得到的
  • 服装方面未进行专门训练。您可以查看我们提供的预览帖子,获取与服装对应的提示词。
  • 本模型使用 138 张图片 进行训练。
  • 我们自动选择的步骤为 1155,以平衡模型的保真度与可控性。以下是所有步骤的概览。您可以在 huggingface 仓库 - CyberHarem/emilia_lapisrelights 中尝试其他推荐步骤。

步骤概览

如何使用此模型

此模型包含两个文件。若您使用的是 WebUI v1.6 或更低版本,必须同时使用这两个文件!!! 此时,您需要下载 emilia_lapisrelights.ptemilia_lapisrelights.safetensors 两个文件,然后emilia_lapisrelights.pt 放入 embeddings 文件夹,并同时将 emilia_lapisrelights.safetensors 作为 LoRA 使用若您使用的是 WebUI v1.7+,则只需像普通 LoRA 一样使用 safetensors 文件即可。这是因为嵌入式 LoRA/Lycoris 模型现已得到 a1111 WebUI 的官方支持,详见 此处

このモデルには2つのファイルがあります。WebUI v1.6 以下のバージョンを使用している場合は、これらを一緒に使用する必要があります!!! この場合、emilia_lapisrelights.ptemilia_lapisrelights.safetensors の両方をダウンロードする必要があり、 その後、emilia_lapisrelights.ptembeddings フォルダに入れ、同時に emilia_lapisrelights.safetensors をLoRAとして使用しますwebui v1.7+を使用している場合、一般的なLoRAsのようにsafetensorsファイルを使用してください。 これは、埋め込みバンドルされたLoRA/Lycorisモデルが現在、a1111のwebuiに公式にサポートされているためです。 詳細についてはこちらをご覧ください。

此模型包含两个文件。如果您使用的是 WebUI v1.6 或更低版本,您需要同时使用这两个文件! 在这种情况下,您需要下载 emilia_lapisrelights.ptemilia_lapisrelights.safetensors 两个文件, 然后emilia_lapisrelights.pt 放入 embeddings 文件夹中,并同时使用 emilia_lapisrelights.safetensors 作为 LoRA如果您正在使用 webui v1.7 或更高版本,只需像常规 LoRAs 一样使用 safetensors 文件。 这是因为嵌入式 LoRA/Lycoris 模型现在已经得到 a1111's webui 的官方支持, 更多详情请参见这里

触发词为 emilia_lapisrelights,精简标签为 long_hair, purple_hair, hair_between_eyes, red_eyes, bangs, breasts, purple_eyes当某些特征(如发色)在某些时候不够稳定时,您可以将这些标签添加到您的提示词中

模型训练方式

  • 本模型使用 HCP-Diffusion 进行训练。
  • 自动训练框架DeepGHS 团队 维护。
  • 训练所用的基础模型为 deepghs/animefull-latest
  • 训练数据集为 CyberHarem/emilia_lapisrelights 中的 stage3-p480-800,共包含 138 张图片。
  • 批量大小为 4,分辨率为 720x720,聚类为 5 个桶。
  • 正则化数据集的批量大小为 16,分辨率为 720x720,聚类为 10 个桶。
  • 训练了 1400 步,保存并评估了 40 个检查点。
  • 我们自动选择的步骤为 1155,以平衡模型的保真度与可控性

更多训练细节和推荐步骤,请参阅 huggingface 仓库 - CyberHarem/emilia_lapisrelights

为何部分预览图与角色形象不符

所有预览图中使用的提示词(可通过点击图片查看)均是基于训练数据集中提取的特征信息,通过聚类算法自动生成。图像生成时使用的种子也是随机生成的,且图片未经过任何人工筛选或修改。因此,出现上述问题的可能性是存在的。

实际上,根据我们的内部测试,大多数遇到此类问题的模型在实际使用中表现优于预览图所展示的效果。您唯一需要做的可能是调整所使用的标签

我感觉此模型可能存在过拟合或欠拟合,该怎么办?

您在这里看到的步骤是自动选定的。我们也为您推荐了其他优质步骤供您尝试。点击此处选择您喜欢的步骤。

我们的模型已发布在 huggingface 仓库 - CyberHarem/emilia_lapisrelights,其中保存了所有步骤的模型。此外,我们在 huggingface 数据集 - CyberHarem/emilia_lapisrelights 上发布了训练数据集,这可能对您有所帮助。

为何不直接使用筛选出的更好图片?

本模型从数据爬取、训练,到生成预览图和发布,整个过程 100% 自动化,无人工干预。这是我们的团队进行的一项有趣实验,为此我们构建了一整套软件基础设施,包括数据筛选、自动训练和自动化发布。因此,若有可能,我们非常期待您的反馈或建议,这对我们的工作至关重要。

为何无法准确生成角色的期望服装?

我们当前的训练数据来源于多个图片网站,对于完全自动化的流程而言,精准预测角色拥有哪些官方图像极具挑战性。因此,服装生成依赖于对训练数据集中标签的聚类,以尽可能重现效果。我们将持续改进这一问题,但仍难以完全解决。服装重现的准确性也难以达到人工训练模型的水平。

事实上,本模型最大的优势在于能够还原角色本身的固有特征,并因其较大的数据集而具备较强的泛化能力。因此,本模型非常适合用于更换服装、调整角色姿势,当然也包括生成角色的 NSFW 图像!😉

以下群体不建议使用本模型,我们深表遗憾:

  1. 无法容忍任何与原角色设计的细微偏差的用户。
  2. 对角色服装还原精度要求极高的应用场景用户。
  3. 无法接受基于 Stable Diffusion 算法生成图像时潜在随机性的用户。
  4. 不适应使用 LoRA 自动训练角色模型的流程,或认为训练角色模型必须完全手动操作以避免“不尊重角色”的用户。
  5. 认为生成内容冒犯其价值观的用户。

此模型生成的图像

未找到图像。