Tsumugi Shirogane ( Danganronpa ) [Flux]

저는 또한 제 Tsumugi Shirogane [실험적 분기] (Danganronpa) LoRA도 시도해보시길 추천드립니다. 이 LoRA는 곧 이 버전의 다음 업데이트가 될 예정이지만, '실제' 출시 전에 몇 가지 새로운 학습 아이디어를 실험하고 있습니다.

Tsumugi Shirogane - Danganronpa V3의 최고의 코스프레러. 이 LoRA를 사용하면 Tsumugi의 공식 복장과 Danganronpa 관련 아트 스타일로 이미지를 생성할 수 있으며, 다른 의상과 스타일에도 유연하게 적용할 수 있습니다. Tsumugi가 코스프레할 수 있어야 한다는 건 명백합니다!

저는 캡션을 태그 대신 자연어로 학습했습니다. 따라서 이 LoRA로 최적의 결과를 얻으려면 자연어 프롬프트를 사용하는 것이 좋습니다. 하지만 임의의 와일드카드 값을 가진 몇 가지 태그도 함께 넣어봤는데, 그 결과들이 꽤 훌륭하게 나와 놀랐습니다. 갤러리에 몇 가지 예시가 있을 것입니다. 일부 와일드카드 값의 텍스트는 단어들의 무작위 나열에 가깝지만, 그에 따른 이미지들 중 일부는 오히려 랜덤한 개념의 모음치고 꽤 훌륭하게 나왔습니다.

저는 다양한 수준의 성공을 거둘 수 있는 몇 가지 특정 이미지 유형으로 학습했습니다. 이미지에는 다양한 프롬프트 옵션을 포함해 비교·대조하기 쉽게 했습니다. 그러나 주요 옵션들은 다음과 같습니다.

Danganronpa the Animation: 프롬프트에 “This is an anime screencap from Danganronpa The Animation”을 사용하여 애니메이션 시리즈 Danganronpa the Animation의 아트 스타일을 모방하세요.

Danganronpa 3(애니메이션): “This is an anime screencap from Danganronpa 3.”를 사용하세요.

Danganronpa의 스프라이트: 프롬프트에 ‘danganronpa sprite style’을 포함하여 Danganronpa의 아트 스타일을 모방해보세요. 예: “this image is in the danganronpa sprite style”. 이름과 달리, 이 설명과 함께 GUI가 있는/없는 전체 스크린샷과 캐릭터 스프라이트 이미지를 모두 학습했습니다. 따라서 이론적으로 전체 이미지에 ‘danganronpafy’ 효과를 줄 수 있습니다.

Danganronpa V3 GUI: 이 방식은 잘 동작하지 않습니다. 하지만 아래 문장을 시도해보세요. “이 이미지는 danganronpa V3 GUI 스타일과 danganronpa 스프라이트 스타일을 사용합니다. 이미지의 오른쪽 위 모서리에는 ‘Chapter 4 Level 69’라고 쓰인 danganronpa V3 GUI 요소가 있으며, 이 두 단어는 모두 흰색 텍스트이고, ‘Chapter 4’는 노란색 사각형 위에 검은색 테두리로 강조되어 있습니다. 이미지의 왼쪽 위는 노란색 막대로 둘러싸여 있으며, 그 위에 검은색 텍스트 ‘Becoming’이 쓰여 있습니다. Tsumugi 아래에는 흰색 테두리와 검은색 텍스트로 ‘This is the example text.’라고 쓰인 대화 텍스트가 있으며, 이 대화 아래에는 둥근 모서리의 검은색 사각형이 들어 있는 노란색 사각형이 있고, 그 안에 ‘AUTO’라고 쓰여 있습니다.”

Danganronpa S GUI: 이 방식도 잘 동작하지 않습니다. 하지만 아래 문장을 시도해보세요. “이 이미지는 danganronpa S GUI 스타일과 danganronpa 스프라이트 스타일을 사용합니다. 이미지 아래에 대화 버블이 있으며, ‘This is test text!’라고 쓰여 있습니다. 이 대화 버블은 Tsumugi 앞에 있습니다. 대화 버블 옆에는 파란색 배경에 흰색 별과 오른쪽을 가리키는 회색 화살표가 있는 박스가 있으며, 이 박스에는 ‘Tsumugi Shirogane’이라고 쓰여 있습니다.”

의상: 다음과 같은 프롬프트로 다양한 의상 옵션을 시도해보세요.

표준 복장: Danganronpa V3의 대부분에서 Tsumugi가 입는 교복. “Tsumugi Shirogane is wearing her uniform from Danganronpa V3. Tsumugi Shirogane has knee-length dark teal-blue hair parted in the center which is straight and smooth at the base and gradually splits into waves near the tips. Her eyes are large, round, and are a soft teal-green color. Tsumugi wears round, rimless glasses with white temples. Tsumugi's Danganronpa V3 school uniform consists of a white blouse with an orange bow tied at her collar underneath a two-button, pocketed, teal-black school blazer adorned with two silver buttons on each lapel and a single button on each gorge. She wears a knee-length teal-black pleated skirt with two dark teal stripes lining the hem. Her legwear consists of dark navy knee-length socks and teal-gray loafers.”

수영복: Danganronpa V3에서 Tsumugi가 입는 주황색 비키니. “Tsumugi Shirogane wearing her swimsuit from Danganronpa S. Tsumugi Shirogane is wearing an orange bikini swimsuit. The top is a light orange color with white decorative lace along the edges. It has a prominent bow in the center between the cups. The bottom of the swimsuit is a similar orange color to match the top. Tsumugi Shirogane has knee-length dark teal-blue hair parted in the center which is straight and smooth at the base and gradually splits into waves near the tips. Her eyes are large, round, and are a soft teal-green color. Tsumugi wears round, rimless glasses with white temples.”

프롤로그 복장: Danganronpa V3 프롤로그에서 Tsumugi가 입는 복장. “Tsumugi Shirogane wearing her uniform from the Danganronpa V3 prologue. Tsumugi Shirogane has knee-length dark teal-blue hair parted in the center which is straight and smooth at the base and gradually splits into waves near the tips. Her eyes are large, round, and are a soft teal-green color. Tsumugi wears round, rimless glasses with white temples. She's wearing her long-sleeved sailor-style seifuku, which is white with a blue collar and a navy blue ribbon tied at her neck. The seifuku has small white accents on the sleeves and collar. She's also wearing a blue and white striped skirt and dark knee-high socks.”

기타 의상: 이 LoRA는 Tsumugi의 의상에 대해 매우 유연합니다. 이 LoRA의 갤러리에는 학습 데이터에 없던 옷을 입은 Tsumugi의 예시가 몇 가지 있을 것입니다.

장소: 특정 장소를 학습시키진 않았지만, 학습 데이터에 충분히 나타난 장소들이 있어, Danganronpa V3와 Jabberwock Island의 지역을 명시하면 결과를 개선할 수 있습니다. 단순히 ‘V3’ 혹은 ‘Jabberwock Island’라고 언급하는 것만으로도 적절한 방향으로 유도하는 데 도움이 될 수 있습니다.

학습 자료: 대부분의 학습 데이터는 Danganronpa V3와 Danganronpa S에서 가져왔으며, 가능한 한 공식 보조 자료도 추가했습니다. 게임 관련 데이터에는 모든 스프라이트와 몇 장의 인게임 스크린샷이 포함되어 있습니다. LLM으로 캡션을 작성한 후 수작업으로 교정했습니다. 그 후 Danganronpa the Animation과 Danganronpa 3의 스타일 학습도 추가했습니다. 후자는 학습이 오염될까 우려되었지만, 포함/제외하고 테스트한 결과 차이가 없었기 때문에 추가하여 추가 LoRA 없이 스타일 전환을 쉽게 할 수 있도록 했습니다. 그러나 Tsumugi는 해당 자료에 등장하지 않기 때문에, 예를 들어 Chiaki처럼 이로부터 큰 혜택을 받지 못합니다.

참고: Tsumugi의 머리카락은 다양한 표현에 따라 불안정합니다. Chiaki만큼 심각하지는 않지만요. Flux는 Spike Chunsoft도 혼란스러워하는 Tsumugi의 머리카락 색을 자주 헷갈려합니다. 또한, 이 LoRA는 ‘danganronpa 스프라이트 스타일’을 사용할 때 배경을 ‘danganronpa’화하는 데 일관성이 부족한 것 같습니다. 완전한 효과를 얻으려면 여러 번 생성이 필요할 수 있습니다. ‘danganronpa V3 GUI 스타일’과 ‘danganronpa S GUI 스타일’을 사용하면 도움이 될 수 있습니다. 그러나 예상대로 GUI 요소가 나타날 수도 있습니다. 마찬가지로 GUI 요소를 사용하면 애니메이션 스타일을 압도하고 게임의 인게임 미학으로 밀어넣는 경향이 있습니다. 돌아보면 GUI 표현을 개선하려고 지나치게 열중했고, 그 결과 GUI가 없는 인게임 아트에 대한 학습이 부족해졌습니다.

이 LoRA의 SDXL 및 SD 1.5 버전도 곧 출시될 예정입니다. 두 버전의 초안을 실험하면서 방법론을 약간 조정해보고 있습니다. 현재 상태의 Flux Chiaki 데이터는 그대로 학습에 사용할 수 있습니다. SDXL과 SD 1.5용 Tsumugi LoRA를 완성한 다음에 그 다음으로 Chiaki를 학습할 예정입니다. 하지만 Chiaki가 충분히 등장하는 DR 3 애니메이션 데이터셋을 강화한 후에 진행할 계획이므로 약간의 지연이 있을 것입니다. 또한 이 작업 전반적으로 Danganronpa 3 애니메이션 스타일을 강화하는 것이 큰 이득이 될 것 같아서요. 따라서 Chiaki LoRA는 약간 늦게 나오겠지만, 일주일 이상은 걸리지 않을 것입니다.