Lion King - Multi Character/Style LoRA

여기에는 "라이온 킹" 영화의 캐릭터들(라이언 가드 시리즈 제외)과 영화의 스타일, 그리고 유사한 "디즈니 르네상스" 영화 스타일을 모두 담은 '올인원' LoRA입니다. 저는 주로 곧 제작할 다른 멀티 컨셉 LoRA들을 위한 '연습' 차원에서 이 작업을 진행했습니다. 대부분의 캐릭터들은 이미 독립적인 LoRA가 존재하거나 미세조정된 모델에서 잘 작동하므로, 디스크 공간을 절약하는 것을 제외하면 이 LoRA의 실용성은 제한적일 수 있습니다. 이 LoRA의 학습은 다소 복잡했으며, 기본 모델 1.5와 일부 v-pred, non-vpred 페르리 모델을 혼합하여 학습하고, 여러 번 병합/가중치 조정 및 이전 가중치에서 재개하는 방식으로 진행했습니다. 관심이 있다면 더 자세한 내용을 제공할 수 있으나, 곧 학습할 다른 데이터셋을 위해 이 과정을 '정제'하는 데 집중하겠습니다.

현재 이 모델은 1.5 버전만 제공되지만, 곧 다른 아키텍처 버전도 제작해보겠습니다.

캐릭터 및 생성을 더 일관되게 만들 수 있는 선택적 헬퍼 태그와 특이한 행동에 대한 참고 사항입니다. 모든 캐릭터는 남성/여성, 앤트로/페럴에 유연하게 적용 가능하며, 기본 종을 네거티브 프롬프트로 제거하고 다른 종을 명시하면 종 다양성에도 유연하게 적용될 수 있습니다:

• banzai ( 하이에나, 회색 털/몸, 노란 공막, 반점, 검은 귀)

  • 다른 캐릭터보다 털 색상이 다른 요소로부터 '색상 누출'이 일어나기 쉬우므로 문제가 발생하면 "회색 털"을 명시하세요.

• edhyena ( 하이에나, 회색 털/몸, 노란 공막, 반점, 검은 귀, 멍한 눈)

  • "ed"가 트리거 단어로 작동하는 문제를 피하기 위해 이름을 변경했습니다.

• kiara ( 암사자, 베이지 털/몸, 노란 공막, 붉은 눈)

• kovu ( 수사자, 갈색 털/몸, 갈색 털/목털, 노란 공막, 녹색 눈)

• mufasa ( 수사자, 노란 털/몸, 붉은 털/목털, 노란 공막, 붉은 눈)

• nala ( 암사자, 노랑/베이지 털/몸, 노란 공막, 파란 눈)

• nuka ( 수사자, 주황/갈색 털/몸, 검은 털/목털, 노란 공막, 붉은 눈)

• pumbaa ( 돼지, 갈색/빨간 몸/털, 검은 털, 코끼리니, 노란 공막)

  • 코의 구멍 수가 잘못 생성되는 경우가 종종 발생하며, 돼지형 캐릭터에서 지속적인 문제입니다.

• rafiki ( 원숭이, 회색 몸/털, 흰 털/목털, 노란 공막)

• sarabi ( 암사자, 베이지 털/몸, 노란 공막, 붉은 눈)

• sarafina ( 암사자, 베이지 털/몸, 노란 공막, 녹색 눈)

  • 학습 중 일부 경우 얼룩이 생기며 치타로 변형되는 문제가 있었고, 최종적으로 수정했지만 스타일이 과도하게 적용되었습니다. 더 현실적인 버전을 생성하려면 LoRA 강도를 낮추는 것이 필요할 수 있습니다.

• shenzi ( 하이에나, 회색 몸/털, 검은 털, 검은 귀, 반점, 노란 공막)

• simba ( 수사자, 노란 몸/털, 붉은 털/목털, 노란 공막, 붉은 눈)

• taka ( 수사자, 주황/갈색 털/몸, 검은 털/목털, 노란 공막, 녹색 눈)

  • 실제 흉터를 유도하는 문제를 피하기 위해 'Scar' 대신 'canonical' 이름인 'taka'를 사용했습니다.

• timon ( 메르카트, 베이지 털/몸, 붉은 털, 검은 귀, 흰 공막)

  • 귀의 위치에 가끔 문제가 발생합니다.

• vitani ( 암사자, 베이지/주황 털/몸, 노란 공막, 보라색 눈)

• zazu ( 조류, 뿔부리새, 주황 부리, 파랑 털/몸, 흰 등색, 흰 공막)

  • 가끔 두 개의 부리가 서로 다른 방향을 바라보는 이상한 얼굴 형태로 생성되며, 일부 시드는 불안정합니다.

• zira ( 암사자, 베이지/갈색 털/몸, 노란 공막, 붉은 눈)

  • 이마에 검은 무늬가 생성되지 않거나, 다른 캐릭터보다 스타일이 과도하게 적용된 경향이 있습니다.

영화 스타일을 적용하려면 "disney animation"을 사용하세요. 이는 캐릭터를 영화와 더 정확하게 느껴지게 하거나, 다른 캐릭터 및 종과 함께 독립적인 스타일 LoRA처럼 사용할 수 있습니다. 학습 예시의 대부분이 사자나 하이에나이지만, 다양한 종에도 유연하게 적용됩니다. 명시하지 않으면 노란 공막을 가진 캐릭터가 과도하게 나타날 수 있습니다.