v2.1 & v2.0

その他バージョン

966枚の「Shiny Colors」カードに基づくLoRA（ハダマール積）で、26キャラクターをそれぞれ異なる程度で認識します。

deresute-v1.3-epoch16 から偶然再開したため、初期から訓練したわけではなく、Cinderella Girlsのキャラクターに関する知識の多くが保持されているのが驚きです。これは、モデルの能力がまだ著しく未達成である可能性を示唆しています。

また、非常に非効率なスタイル転送のデモとしても機能します：まずキャラクターを学習し、その後多数の関係のないスタイル画像でさらに訓練する方法です。

使い方

このハダマール積LoRAを使用するには、Web UI上で追加拡張機能のインストールが必要です。

スタイル自体にトリガー語は設けられていません。以下にキャラクターごとのタグと、それぞれの上位20個の関連タグを示します。

Sakuragi Mano,
茶色い目, 笑顔, 1girl, 口を開いている, 茶色の髪, 観客を見つめている, ソロ, 肉っ気, 薄茶色の髪, 屋外, カゴスカート, 持っていた, 中肉長めの髪, 赤ら顔, シャツ, オランダ角, 乳首, 髪飾り, 複数の女の子, 金髪

Kazano Hiori,
黒髪, あざ, 口の下のあざ, 長めの髪, 観客を見つめている, 笑顔, 1girl, ソロ, 肉っ気, 口を開いている, ねじり髪, 紫の目, 複数の女の子, 金髪, カゴスカート, ドレス, 髪飾り, 乳首, 屋外, 持っていた

Hachimiya Meguru,
金髪, 青い目, 笑顔, 長めの髪, 観客を見つめている, 髪飾り, 1girl, 口を開いている, ソロ, 乳首, あほげ, ヘアピン, ツインテール, 複数の女の子, シャツ, 屋外, 肉っ気, 黒髪, カゴスカート, 大きな乳首

Osaki Tenka,
長めの髪, 茶色の髪, 黄色い目, 肉っ気, 観客を見つめている, 1girl, 目の間の髪, 笑顔, ソロ, 口を開いている, 持っていた, 赤ら顔, 長袖, ドレス, 複数の女の子, フリル, 茶色い目, 编み髪, 姉妹, サイドスカート

Morino Rinze,
赤い目, 黒髪, 肉っ気, 短めの髪, 1girl, 観客を見つめている, ソロ, 笑顔, 青髪, 長袖, 髪飾り, 持っていた, 髪結い, 屋外, 複数の女の子, カゴスカート, シャツ, 口を開いている, 花, 長髪

Tsukioka Kogane,
長髪, 茶色の髪, 肉っ気, 観客を見つめている, 乳首, 茶色の目, 大きな乳首, 1girl, 笑顔, ソロ, 口を開いている, 赤ら顔, カゴスカート, 飾り, リボン, シャツ, リボン, ドレス, 持っていた, 屋外

Arisugawa Natsuha,
長髪, 笑顔, 肉っ気, オレンジ色の髪, 観客を見つめている, 乳首, 飾り, 1girl, ソロ, イヤリング, 黒い目, 口を開いている, 赤髪, シャツ, 複数の女の子, カゴスカート, 茶色の髪, ジャケット, あほげ, 屋外

Kuwayama Chiyuki,
茶色の髪, 長めの髪, 笑顔, 観客を見つめている, 茶色の目, 肉っ気, 乳首, 1girl, あほげ, ソロ, 编み髪, 持っていた, 口を開いている, 飾り, 赤ら顔, ドレス, カゴスカート, 複数の女の子, 大きな乳首, シャツ

Osaki Amana,
茶色の髪, 長めの髪, 黄色い目, 笑顔, 肉っ気, 観客を見つめている, 口を開いている, 1girl, ソロ, 飾り, 乳首, 複数の女の子, 赤ら顔, フリル, ドレス, 持っていた, キャノン, 座っている, カゴスカート, 肩出し

Saijo Juri,
金髪, 短い髪, 紫の目, 1girl, 観客を見つめている, 肉っ気, ソロ, 笑顔, ジャケット, 飾り, 屋外, シャツ, ショートパンツ, 持っていた, 複数の女の子, 口を開いている, オランダ角, カゴスカート, 乳首, 茶色の髪

Komiya Kaho,
赤髪, 長めの髪, 赤い目, 笑顔, 口を開いている, 肉っ気, 観客を見つめている, 1girl, ソロ, あほげ, ジャケット, カゴスカート, 複数の女の子, シャツ, 持っていた, ショートパンツ, 茶色の髪, 屋外, 目の間の髪, ロングミトン

Tanaka Mamimi,
紫の髪, 紫の目, 肉っ気, 斜めの前髪, 観客を見つめている, 飾り, 1girl, ツインテール, ソロ, イヤリング, 長髪, 笑顔, ネイルポリッシュ, 持っていた, シャツ, カゴスカート, チョーカー, 口を開いている, 乳首, ジャケット

Yukoku Kiriko,
長髪, 灰色の髪, 紫の目, 肉っ気, 観客を見つめている, ツインテール, ドレス, 笑顔, 1girl, ソロ, 複数の女の子, 口を開いている, 長袖, 持っていた, フリル, 茶色の髪, 乳首, シャツ, 黒髪, テープ

Mitsumine Yuika,
黒髪, 長めの髪, 笑顔, 観客を見つめている, 1girl, 青い目, ソロ, ツインテール, 眼鏡, 口を開いている, 帽子, ジャケット, 茶色の髪, カゴスカート, 肉っ気, 飾り, 持っていた, 屋外, 複数の女の子, シャツ

Sonoda Chiyoko,
茶色の髪, 観客を見つめている, ツインテール, 1girl, ソロ, 赤い目, 笑顔, 肉っ気, 髪結い, 二つ編み, 持っていた, カゴスカート, 食べ物, 長髪, 口を開いている, 複数の女の子, 飾り, シャツ, 乳首, 目を閉じている

Serizawa Asahi,
青い目, 短い髪, 1girl, 肉っ気, 観客を見つめている, 灰色の髪, ソロ, 口を開いている, 屋外, 笑顔, ジャケット, シャツ, カゴスカート, ショートパンツ, 長袖, 飾り, 靴, 空, 持っていた, 茶色の髪

Shirase Sakuya,
黒髪, 長めの髪, 黄色い目, 笑顔, 肉っ気, 乳首, 飾り, ねじり髪, 目の間の髪, 大きな乳首, 観客を見つめている, 1girl, ソロ, ハイネジ, バレエ etc, イヤリング, 複数の女の子, ジャケット, 口を開いている, ネックレス

Izumi Mei,
長髪, 金髪, 茶色の髪, 多色髪, 漸層色の髪, ギャル, 黒い目, 乳首, 観客を見つめている, 飾り, 1girl, イヤリング, 大きな乳首, ソロ, 笑顔, お肌の色が濃い, バレエ etc, ジャケット, けし色の肌, 複数の女の子

Mayuzumi Fuyuko,
黒髪, 長めの髪, 肉っ気, 観客を見つめている, 茶色の目, 直角の前髪, 笑顔, 1girl, カゴスカート, ソロ, 両サイドアップ, 口を開いている, シャツ, 飾り, 乳首, 長袖, 複数の女の子, 多色髪, 持っていた, 座っている

Asakura Toru,
短い髪, 観客を見つめている, 1girl, ソロ, 飾り, 多色髪, 漸層色の髪, 肉っ気, 青い髪, イヤリング, あほげ, 茶色の髪, 屋外, ジャケット, 髪飾り, オランダ角, 青い目, ドレス, 複数の女の子, 笑顔

Higuchi Madoka,
短い髪, 目の下のあざ, あざ, 茶色の髪, 紫の目, 髪飾り, ヘアピン, 1girl, ソロ, 観客を見つめている, 肉っ気, カゴスカート, ジャケット, 長袖, 屋外, 複数の女の子, 黒髪, シャツ, ネイルポリッシュ, オランダ角

Ichikawa Hinana,
茶色の髪, 観客を見つめている, 茶色の目, 長髪, 肉っ気, 1girl, ソロ, カゴスカート, 口を開いている, 髪結い, 笑顔, リボン, オランダ角, 割れ前髪, 髪リボン, ドレス, 飾り, 髪飾り, 単一髪結い, シャツ

Fukumaru Koito,
黒髪, 紫の目, ツインテール, 1girl, 観客を見つめている, ソロ, 歯, 口を開いている, 皮膚の歯, カゴスカート, 髪飾り, リボン, シャツ, 室内, 短い髪, オランダ角, 髪リボン, 長袖, 複数の女の子, 茶色の髪

Nanakusa Nichika,
観客を見つめている, 1girl, 茶色の髪, 緑色の髪, ソロ, 短い髪, 笑顔, 肉っ気, 茶色の目, 複数の女の子, 長髪, 飾り, 口を開いている, ジャケット, シャツ, 屋外, 持っていた, イヤリング, ミトン, ドレス

Aketa Mikoto,
多色髪, 茶色の髪, 漸層色の髪, 飾り, 観客を見つめている, ジャケット, 1girl, 金髪, 笑顔, イヤリング, 茶色の目, ソロ, 複数の女の子, 2girls, ミトン, ネイルポリッシュ, 緑色の髪, シャツ, ドレス, 乳首

Ikaruga Luca,
1girl, 多色髪, 黒髪, 黄色い目, 観客を見つめている, ソロ, 金髪, 肉っ気, カゴスカート, ストライプヘア, 腹筋, クロップトップ, 二色ヘア, 中間ヘア, ジャケット, ミトン, シャツ, フィッシュネッツ, 乳首, オフショルダー

さらに、Cinderella Girls のプロンプトもほとんどそのまま利用可能です。

訓練情報

訓練データセット：

• シャニマスDB から収集した996枚の「Shiny Colors」カード

タグは SmilingWolf/wd-v1-4-convnextv2-tagger-v2 で、閾値0.35で生成。バランス調整やタグのクリーニングなし。プロダクションカードとサポートカードの区別なし。

2022年の論文 にインスピレーションを得て、カスタムLRスケジューラを使用：

SequentialLR(optimizer, [
    LinearLR(optimizer, 0.1, total_iters=steps_per_epoch),
    CosineAnnealingWarmRestarts(optimizer, steps_per_epoch*2, T_mult=2)
], [steps_per_epoch])

訓練コスト：約12 T4時間（deresuteのコストに加えて）

データ分布：

            character  cards
1       Sakuragi Mano     52
2        Kazano Hiori     49
3    Hachimiya Meguru     47
4         Osaki Tenka     46
5        Morino Rinze     45
6     Tsukioka Kogane     44
7   Arisugawa Natsuha     44
8    Kuwayama Chiyuki     44
9         Osaki Amana     43
10         Saijo Juri     43
11        Komiya Kaho     43
12      Tanaka Mamimi     42
13      Yukoku Kiriko     42
14    Mitsumine Yuika     40
15     Sonoda Chiyoko     40
16     Serizawa Asahi     39
17     Shirase Sakuya     38
18          Izumi Mei     35
19    Mayuzumi Fuyuko     34
20       Asakura Toru     28
21     Higuchi Madoka     28
22    Ichikawa Hinana     26
23     Fukumaru Koito     25
24   Nanakusa Nichika     23
25       Aketa Mikoto     22
26       Ikaruga Luca      4

訓練設定 (v2.0):

[model_arguments]
v2 = false
v_parameterization = false
pretrained_model_name_or_path = "animefull-final-pruned.ckpt"

[additional_network_arguments]
no_metadata = false
network_module = "lycoris.kohya"
network_dim = 16
network_alpha = 1
network_args = [ "conv_dim=0", "algo=loha",]
network_train_unet_only = false
network_train_text_encoder_only = false
cache_latents = false

[optimizer_arguments]
optimizer_type = "AdamW8bit"
learning_rate = 0.001
max_grad_norm = 1.0
lr_scheduler = "custom"

[dataset_arguments]
debug_dataset = false
# バッチサイズ: 4 x 2
# 解像度: 640

[training_arguments]
output_name = "shinymas-v2.0"
save_precision = "fp16"
save_every_n_epochs = 1
max_token_length = 225
mem_eff_attn = false
xformers = true
max_train_epochs = 31
max_data_loader_n_workers = 0
persistent_data_loader_workers = false
gradient_checkpointing = false
gradient_accumulation_steps = 1
mixed_precision = "fp16"
clip_skip = 2
log_prefix = "shinymas-v2.0"
lowram = true

[sample_prompt_arguments]

[saving_arguments]
save_model_as = "safetensors"

v2.1は、v2.0をもとに解像度を768に引き上げ、バッチサイズと学習率を半分に調整しています。