KumaBear-Roukin8-characters-LoCon/FullCkpt くまベアー/ろうきん8

세부 정보

파일 다운로드

모델 설명

clip skip 1을 기반으로 훈련된 모델, ACertainty

중간 단계 체크포인트는 허깅페이스에서 확인 가능: https://huggingface.co/alea31415/kumabear-roukin-characters

로컨은 해당 체크포인트에서 추출됨

첫 네 장의 이미지는 전체 체크포인트로 생성되었으며, 나머지는 각각의 모델을 사용하여 생성됨 (물론 로컨을 루킨 캐릭터에 활용하는 것도 가능함. 단지 제가 프롬프트를 입력하는 것을 귀찮아서 그런 것뿐임)

왜 두 애니메이션을 함께 훈련했을까?

이 두 애니메이션(실제로는 라이트노벨)은 너무나도 유사한 점이 많아서, 정말로 크로스오버를 만들고 싶었기 때문임.

또한 단일 애니메이션에만 집중할 이유도 없다. 다음에 신마이 레인지지시의 텐포 케이에이를 추가할 계획임.

트리거 단어

KumaBear

  • Atla

  • Cliff

  • Eleanora

  • Fina

  • Flora

  • Gentz

  • Misana

  • Noire

  • Shia

  • Shuri

  • Telmina

  • Yuna

Roukin8

  • Adelaide

  • Beatrice

  • Colette

  • Sabine

  • YamanoMitsuha

모든 요소를 정확히 표현하기 위해 의상 및 액세서리에 해당하는 추가 트리거 단어가 필요할 수 있음. 아래에 몇 가지 제안:

  • 유나의 곰 코스튬을 원한다면 ‘kigurumi’, ‘bear hood’, ‘animal hood’, ‘animal costume’, ‘hand puppet’ 등을 추가

  • 필나/슈리/노아의 경우 빨간 리본 추가

  • 시아의 경우 이중 드릴 추가

  • 플로라의 경우 이중 뱅드 추가

  • 텔미나의 경우 스런치 테이프 추가

쿠마쿄우와 쿠마유루는 태그가 없지만, 곰, 고무 인형 등으로 프롬프트를 입력하면 비슷한 결과를 얻을 수 있음.

흥미롭게도 훈련 초기 단계에서는 유나의 앞치마를 벗기기 매우 어려웠지만, 더 긴 훈련을 거치며 그 가능성이 생김 (사실 현재 유나는 기본적으로 앞치마가 없지만, 거의 모든 이미지에서 올려 쓴 채로 나옴!)

두 애니메이션에서 빠진 캐릭터들이 많음. 시즌이 끝날 무렵 쿠마베어 모델을 아래 캐릭터들로 업데이트할 예정임:

Kumakyuu, Kumayuru, Lurina, Farrat (왕), Kitia (왕비), Karin, Sanya, Helen, Ans, Mylene, Cattleya

데이터셋

KumaBear 5113

  • 애니메이션 스크린샷 5042

  • 팬아트 37

  • 공식 아트 15

  • 라이트노벨 일러스트 19

Roukin8 2948 (스크린샷만)

정규화 이미지 약 30,000장

훈련

  • 처음 9739 스텝 훈련 후 재시작하여 추가로 20494 스텝 훈련

  • clip skip 1, 해상도 512, 배치 사이즈 8, JosephusCheung/ACertainty 기반

  • 2.5e-6 코사인 스케줄러, Adam8bit, 조건부 드롭아웃 0.08

--

지원이나 명예를 필요로 하지 않지만, 제가 훈련한 모델을 사용하고 있으며 유용하다고 느끼시는 것을 알고 싶습니다.

또한 더 많은 프랜차이즈 모델의 필요성에 대해 강력하게 주장하고 싶습니다.

관심 있으신 분은 제 워크플로우를 확인해 보세요: https://github.com/cyber-meow/anime_screenshot_pipeline

저는 단순히 하나의 LoRA에 단일 개념만 인코드할 필요가 없다는 사실을 더 널리 퍼뜨리고 싶을 뿐입니다.

이 모델로 만든 이미지

이미지를 찾을 수 없습니다.