By Night Portraits

详情

模型描述

我是贝拉多娜,这是我的第一个LoRA。(上一次我训练模型还是在你需要为一个角色训练整个Dreambooth模型的时候。还记得吗?那还不到一年前。)

这是我在Stable Diffusion中打造更优质吸血鬼的成果。作为一名长期参与《黑暗年代:吸血鬼——伪装》(Vampire: the Masquerade)游戏的玩家,我终于受够了Stable Diffusion对吸血鬼那“平平无奇”的概念(即使在XL版本上也是如此),以及Midjourney在角色相似性与风格之间不断拉扯的困境。因此,得益于Civitai训练比赛的推动(虽然我差点没赶上截止日期),我终于开始着手制作一个能融合MJ风格与SD灵活性的LoRA。

而这里就是第一版成果。

它能做什么?

《夜之肖像》的目标是锁定一种“黑暗世界”(World of Darkness)风格的、带有泼溅颜料与血迹的暗黑幻想绘画风格,让提示词可以专注于角色细节,不再在风格与相似性之间纠结。

虽然它专为吸血鬼设计,但如果你不明确要求吸血鬼或血迹,而是提供其他色彩,它也能呈现出更梦幻的氛围(你可以从一些非吸血鬼示例中看到)。在全强度下,无论你输入什么提示,它都会极力生成身着酷炫服装、遍布颜料与笔触的黑暗吸血鬼角色,请注意这一点。

它倾向于肖像姿势(半身到四分之三身),带有颜料泼溅效果,服装风格偏向历史感(从中世纪到维多利亚时代不等)。

训练过程

我从几百次生成的图像中精心挑选了100张MJ肖像,并在此之前尝试了无数版本,才最终确立一种稳定、可复现的风格。

由于我参考并拼凑了大量教程(最初有几个训练失败),我对具体设置有点模糊,但记得大概是:2次重复、批量大小8、8个周期,使用3090 Ti显卡,总耗时约11小时。我参考过这篇指南,以及The Ally在Patreon上的教程。

如何使用

大部分示例仅通过调整LoRA的强度实现。如果你想强化风格,可以添加如 splatter styletextured backdropblood splatterpaint splatter and drips 等关键词,使效果更集中。

我建议强度在 0.50.9 之间,具体视提示词而定:简单提示用较高值,复杂提示用较低值,否则LoRA可能会掩盖细节,完全忽略你的意图。

我提供了多个示例,包含不同提示(包括常见的“身穿机甲的男子”),并对比了基础模型与激活LoRA的效果。所有示例均基于SDXL基础模型,使用15%的步数启用refiner,未使用任何额外的高清修复、放大或img2img,仅使用txt2img输出。

目前我尚未提供该LoRA在其他模型或与其他LoRA协同使用的示例——但这已在我的待办清单中。初步测试表明它“能用”,但容易忽略提示,可能需要降低强度。

许多示例使用了我的都市奇幻通配符(我迟早会发布)。《夜之肖像》与它们配合得很好,两者结合可构成一个稳定、一致的黑暗年代角色生成器。

非预期用途

它在非角色肖像的提示下也能生成有趣的结果,值得尝试,详见下图:

提示: 一只巨型龙蜘蛛混合怪物,身处黑暗浓雾密林中,lora:splatter\_lora:1

后续计划

未来版本的改进目标:

  • 在其他模型、其他LoRA及更多样化设置下提供更丰富、更优质的示例

  • 提升多样性(目前尚可,但需改进)

  • 改进对装备、盔甲与服装类型的识别能力

  • 增加更多吸血鬼特征,避免卡通化——如獠牙、发光眼睛、利爪、更瘦削苍白的肤色,但不使其沦为苍白的僵尸

  • 增加现代/哥特朋克风格训练,以适配更当代的《吸血鬼:伪装》风格肖像(V1能做,但可以更好)

  • 增加全身训练,以实现更动态的动作姿势(V1主要擅长肖像姿势)

  • 训练吸血鬼“氏族”概念(如V:tM中的设定),或至少“风格”分类(如:野性、怪物型、德古拉式贵族、社交名媛、刺客、血魔法师等)

  • 也许还有更多!理想情况下,我希望扩展至其他超自然题材(狼人、变种人、法师等),并培养其他稳定的肖像“风格”。如果我足够雄心勃勃,我希望最终能训练出一个完整的都市奇幻微调模型,使其默认输出风格偏向《黑暗世界》、《真爱如血》、《恶魔城》、《魔法师》、《超自然》等作品。但具体情况还需拭目以待。

我很期待看到你们用V1创作出什么!尽管我已提供了大量示例,但我深知自己并非世界上最富创意的提示师。我非常想看到它如何应对不同角色(以及那些非预期用途)。我收集的数据越多,就越能明确V2需要强化哪些方面。

如有任何疑问、反馈,或发现效果异常、有改进建议,欢迎随时联系我。感谢使用,尽情创作吧!(现在,去制造一些吸血鬼吧!)

此模型生成的图像

未找到图像。