치아키 나나미 - 다나고론파 2와 다나고론파 3 애니메이션의 최종 게이머. 이 LoRA는 치아키를 다양한 아트 스타일과 의상 옵션으로 생성할 수 있도록 해줍니다.

중요: 이 Illustrious LoRA는 제 원래 Flux 치아키 나나미 LoRA와 동일한 데이터로 학습되었습니다. 요약하자면, 이 Illustrious LoRA는 다른 시스템을 위한 것이기 때문에 일부 한계가 있습니다.

주요 문제 중 하나는 스타일 지시를 Flux LoRA만큼 잘 이해하지 못한다는 점입니다. '다나고론파 3', '다나고론파 스프라이트 스타일' 등을 지정하면 효과가 있지만, Flux LoRA만큼 강력하지는 않습니다. 특히 스프라이트 스타일은 Flux 버전에 비해 매우 약합니다. 완전한 스타일 LoRA는 향후 계획에 포함되어 있습니다. 스타일 옵션의 효과가 얼마나 큰지(또는 작은지) 보여주기 위해 여기에 충분한 이미지를 업로드했을 것입니다. GUI 스타일은 작동합니다. 단점은 SDXL과 Illustrious가 텍스트 출력에 문제가 있다는 점입니다. 텍스트 상자가 생성되긴 하지만, 그 안의 실제 텍스트는 왜곡됩니다. 운이 좋으면 약 4개의 가독성 있는 단어를 얻을 수 있지만, 그조차도 어려운 편입니다.

저는 캡션을 태그가 아닌 자연어로 학습했습니다. 따라서 이 LoRA로 최상의 결과를 얻으려면 자연어 프롬프트를 사용해야 합니다. 자연어와 태그를 혼합해서 사용해도 잘 작동합니다. 하지만 '단지 태그만' 사용하는 것은 잘 작동하지 않습니다. 대부분의 테스트는 PaSanctuary와 NoobAI에서 진행했습니다.

저는 몇 가지 특정 이미지 유형에 대해 학습했으며, 이를 다양한 수준으로 재현할 수 있습니다. 이미지에 가능한 한 다양한 프롬프트 옵션을 포함시켜 비교할 수 있도록 했습니다. 그러나 주요 옵션은 다음과 같습니다.

스타일

다나고론파 애니메이션: 프롬프트에 "이것은 애니메이션 '다나고론파'의 애니메이션 스크린캡입니다"를 사용하여 애니메이션 시리즈의 아트 스타일을 모방하세요.

다나고론파 3(애니메이션): 프롬프트에 "이것은 애니메이션 '다나고론파 3'의 애니메이션 스크린캡입니다"를 사용하세요.

다나고론파 스프라이트: 프롬프트에 'danganronpa sprite style'을 명시하여 다나고론파의 아트 스타일을 모방해보세요. 예: "이 이미지는 다나고론파 스프라이트 스타일입니다." 이름과 달리, 이 설명과 함께 GUI 유무 관계없이 전체 스크린샷과 캐릭터 스프라이트 추출 이미지를 학습했습니다. 따라서 이론적으로 전체 이미지를 '다나고론파화'할 수 있습니다.

다나고론파 2 GUI: 이 스타일은 잘 작동하지 않습니다. 가독성 있는 텍스트를 얻을 확률도 매우 낮습니다. 그러나 다음과 같은 방식으로 시도해 볼 수 있습니다. "이 이미지는 다나고론파 2 GUI 스타일과 다나고론파 스프라이트 스타일을 사용합니다. 이미지 상단 오른쪽 모서리에는 'Chapter 4 Level 69'라는 텍스트가 있는 다나고론파 2 GUI 요소가 있으며, 이 두 단어는 흰색 텍스트로, 'Chapter 4'는 노란색 사각형 위에 검은색 테두리로 표시됩니다. 이미지 상단 왼쪽은 노란색 막대기로 둘러싸여 있으며, 흰색 텍스트 'Becoming'이 있습니다. 치아키 아래에는 흰색 테두리에 검은색 텍스트로 'This is the example text.'라는 대화 텍스트가 있습니다. 이 대화 아래에는 노란색 사각형 안에 검은색 사각형이 있으며, 그 안에 'AUTO'라는 텍스트가 있고 모서리는 둥글게 처리되어 있습니다."

다나고론파 S GUI: 이 스타일도 잘 작동하지 않습니다. 가독성 있는 텍스트를 얻을 확률도 매우 낮습니다. 그러나 다음 문장의 변형으로 시도해 볼 수 있습니다. "이 이미지는 다나고론파 S GUI 스타일과 다나고론파 스프라이트 스타일을 사용합니다. 이미지 하단에 대화 버블이 있으며, 그 안에 'This is test text!'라고 쓰여 있습니다. 대화 버블은 치아키 앞에 있습니다. 대화 버블 옆에는 파란색 배경에 흰색 별과 오른쪽을 가리키는 회색 화살표가 있는 상자가 있으며, 그 안의 텍스트는 'Chiaki Nanami'입니다."

의상

다음과 같은 프롬프트로 다양한 의상 옵션을 시도해 볼 수 있습니다:

표준 복장: 치아키가 다나고론파 2에서 대부분 입는 학교 유니폼. "치아키 나나미는 다나고론파 2의 유니폼을 입고 있습니다. 치아키의 머리카락은 약간 바깥쪽으로 곱슬거리지만, 얼굴 양쪽의 머리카락은 안쪽으로 곱슬립니다. 치아키 나나미의 머리카락은 거의 흰갈색에 가까운 먼지 같은 연분홍색입니다. 오른쪽으로 갈라진 짧고 곧은 앞머리에, 머리카락에 흰색 갈라가 게 클립이 고정되어 있습니다. 그녀는 봄꽃 같은 분홍색 눈을 가지고 있습니다. 흰색 버튼 셔츠를 입고 있으며, 앞면은 어두운 티어그레이 색으로 되어 있습니다. 목에는 연분홍색 리본을 활 모양으로 매고, 연베이지색 주름 치마를 입고 있습니다. 이 외에 어두운 티어그레이색 후드 달린 카디건도 입고 있으며, 카디건의 밑단과 소매에는 회색 가로줄이 있으며, 가슴 포켓에 희망의 피크 로고가 있습니다. 그녀는 검은색 허벅지 길이 양말과 흰색 밑창의 연분홍색 메리제인 슈즈를 신고 있습니다."

수영복: 치아키가 다나고론파 S에서 입는 흰색 비키니. "치아키 나나미의 다나고론파 S 수영복은 흰색 주름이 있는 비키니 탑이며, 중앙에는 흰색 리본이 달려 있습니다. 아래쪽은 흰색이며 주름이 있습니다. 치아키의 머리카락은 약간 바깥쪽으로 곱슬거리지만, 얼굴 양쪽의 머리카락은 안쪽으로 곱슬립니다. 치아키 나나미의 머리카락은 거의 흰갈색에 가까운 먼지 같은 연분홍색입니다. 오른쪽으로 갈라진 짧고 곧은 앞머리에, 머리카락에 흰색 갈라가 게 클립이 고정되어 있습니다. 그녀는 봄꽃 같은 분홍색 눈을 가지고 있습니다."

다나고론파 3 유니폼: 치아키가 다나고론파 3에서 입는 유니폼입니다. "치아키 나나미는 다나고론파 3의 유니폼을 입고 있습니다. 치아키 나나미는 약간 바깥쪽으로 곱슬린 짧은 머리를 가지고 있으며, 얼굴 양쪽의 머리카락은 안쪽으로 곱슬립니다. 치아키 나나미의 머리카락은 거의 흰갈색에 가까운 먼지 같은 연분홍색입니다. 치아키는 오른쪽으로 갈라진 짧고 곧은 앞머리에, 머리카락에 흰색 갈라가 게 클립이 고정되어 있습니다. 치아키 나나미는 봄꽃 같은 분홍색 눈을 가지고 있습니다. 치아키의 유니폼은 흰색 버튼 셔츠에 붉은 리본을 목에 활 모양으로 매고, 그 위에 따뜻한 갈색 재킷을 입고 있으며, 재킷 아래에는 크림색 후드 달린 카디건을 입고 있습니다. 그녀는 검은색 허벅지 길이 양말과 흰색 밑창의 연분홍색 메리제인 슈즈를 신고 있습니다."

기타 의상

이 LoRA는 치아키의 의상을 매우 유연하게 처리할 수 있으므로, 이론적으로 쉽게 변경할 수 있습니다.

후드: 치아키의 후드를 위로 올린 상태로 프롬프트할 수 있습니다. "치아키는 머리 위로 후드를 쓰고 있습니다. 치아키 나나미의 후드는 꼭대기에 뾰족한 귀가 있고, 앞면에는 분홍색 눈 모양의 무늬가 두 개 있습니다."

백팩: 치아키에게 백팩을 입히려면 다음을 사용하세요. "치아키는 연분홍색 백팩을 메고 있으며, 흰색 주머니가 있고, 상단에는 흰색 리본으로 묶인 플러시 고양이 머리가 바느질되어 있습니다."

배경

특정 장소에 대해 학습하지는 않았지만, 훈련 데이터에 충분히 나타난 장소가 있어, 다나고론파 1, 2, 자버워크 섬의 장소를 명시하면 결과를 개선할 수 있을 수 있습니다. 단지 "자버워크 섬"이라고 언급하는 것만으로도 방향을 잡는 데 도움이 될 수 있습니다. 다나고론파 S와 다나고론파 2 사이에는 훈련 데이터에 많은 자버워크 섬 장면이 포함되어 있습니다.

기타

머리카락: 치아키의 머리카락은 공식 자료에서 안타깝게도 일관되지 않습니다. 시스템도 그녀의 머리카락 색을 혼동할 수 있는데, Spike Chunsoft도 그녀의 머리카락 색을 혼동하기 때문입니다. 조사해보니 누군가가 "치아키 색"이라고 말한 적이 있었고, 저는 이 의견에 동의할 수밖에 없었습니다. 왜냐하면 항상 만족스럽지 않기 때문입니다. 다행히 이 LoRA는 치아키의 머리카락 색을 조정하는 데 유연합니다. 더 분홍색 쪽을 원한다면 "치아키 나나미의 머리카락은 먼지 같은 분홍색입니다."라고 프롬프트해 보세요. 연분홍색에 약간의 갈색을 더하고 싶다면 "치아키 나나미의 머리카락은 거의 흰갈색에 가까운 먼지 같은 연분홍색입니다."라고 하세요.

버전 비교 (SDXL, Illustrious)

SDXL과 Illustrious LoRA는 동일한 데이터셋으로 학습되었으므로 이론적으로 차이가 없어야 합니다. 하지만 실제상황은 그리 단순하지 않습니다. 저는 여전히 이 Illustrious LoRA를 초기 테스트 단계에 있으며, 백로그가 쌓여서 그냥 업로드하기로 결정했습니다.

그러나 지금까지 관찰한 주요 차이점은, 이 Illustrious LoRA가 SDXL LoRA보다 치아키의 후드와 백팩을 더 잘 표현한다는 점입니다. 아마도 기본 Illustrious 모델에 치아키에 대한 일부 정보(하지만 충분하지는 않음)가 이미 포함되어 있기 때문일 것입니다.

지금까지 가장 큰 문제는, 이 Illustrious 모델이 갈라가 게 클립에 너무 많은 강조를 둔다는 점입니다. 그 결과는 지나치게 두드러지거나 극단적인 JPG 압축 이미지처럼 보입니다. 초기 데이터셋에서 클립을 강조한 이유는, Flux와 SDXL이 이를 제대로 인식하지 못했기 때문입니다. 그러나 Illustrious는 그런 문제가 없어 보이며, 오히려 추가 강조를 복제하고 이미지가 허용하는 범위보다 더 세밀하게 렌더링하려 합니다. 다만, 해상도에 영향을 받는 것으로 보입니다. 이미지 해상도가 높을수록 갈라가 게 클립이 자연스럽게 어울립니다. 갤러리에는 클립이 "JPG 압축 효과"를 보이는 몇 가지 예시를 포함했습니다. 아직 테스트하지는 않았지만, 얼굴용 adetailer 확장 프로그램이나 유사한 도구를 사용하면 클립도 잡아내고, 고해상도에서 리렌더링할 때 이를 수정할 수 있을 것이라 추측합니다.

학습 자료

대부분의 학습 데이터는 다나고론파 2, 다나고론파 S, 다나고론파 3에서 가져왔으며, 가능한 한 공식 보조 자료를 추가했습니다. 게임 관련 데이터는 모든 스프라이트와 몇 장의 게임 스크린샷을 포함합니다. LLM으로 캡션을 생성한 후 수작업으로 편집했습니다. 이후 다나고론파 애니메이션의 스타일 학습 자료와 다나고론파 3의 추가 데이터를 결합했습니다. 전자는 학습 데이터를 오염시킬까 걱정했지만, 포함/제외하고 테스트해본 결과 차이가 없었기 때문에, 추가 LoRA 없이도 스타일 변경을 쉽게 할 수 있도록 유지했습니다.