KumaBear-Roukin8-characters-LoCon/FullCkpt くまベアー/ろうきん8
세부 정보
파일 다운로드
이 버전에 대해
모델 설명
clip skip 1을 기반으로 훈련된 모델, ACertainty
중간 단계 체크포인트는 허깅페이스에서 확인 가능: https://huggingface.co/alea31415/kumabear-roukin-characters
로컨은 해당 체크포인트에서 추출됨
첫 네 장의 이미지는 전체 체크포인트로 생성되었으며, 나머지는 각각의 모델을 사용하여 생성됨 (물론 로컨을 루킨 캐릭터에 활용하는 것도 가능함. 단지 제가 프롬프트를 입력하는 것을 귀찮아서 그런 것뿐임)
왜 두 애니메이션을 함께 훈련했을까?
이 두 애니메이션(실제로는 라이트노벨)은 너무나도 유사한 점이 많아서, 정말로 크로스오버를 만들고 싶었기 때문임.
또한 단일 애니메이션에만 집중할 이유도 없다. 다음에 신마이 레인지지시의 텐포 케이에이를 추가할 계획임.
트리거 단어
KumaBear
Atla
Cliff
Eleanora
Fina
Flora
Gentz
Misana
Noire
Shia
Shuri
Telmina
Yuna
Roukin8
Adelaide
Beatrice
Colette
Sabine
YamanoMitsuha
모든 요소를 정확히 표현하기 위해 의상 및 액세서리에 해당하는 추가 트리거 단어가 필요할 수 있음. 아래에 몇 가지 제안:
유나의 곰 코스튬을 원한다면 ‘kigurumi’, ‘bear hood’, ‘animal hood’, ‘animal costume’, ‘hand puppet’ 등을 추가
필나/슈리/노아의 경우 빨간 리본 추가
시아의 경우 이중 드릴 추가
플로라의 경우 이중 뱅드 추가
텔미나의 경우 스런치 테이프 추가
쿠마쿄우와 쿠마유루는 태그가 없지만, 곰, 고무 인형 등으로 프롬프트를 입력하면 비슷한 결과를 얻을 수 있음.
흥미롭게도 훈련 초기 단계에서는 유나의 앞치마를 벗기기 매우 어려웠지만, 더 긴 훈련을 거치며 그 가능성이 생김 (사실 현재 유나는 기본적으로 앞치마가 없지만, 거의 모든 이미지에서 올려 쓴 채로 나옴!)
두 애니메이션에서 빠진 캐릭터들이 많음. 시즌이 끝날 무렵 쿠마베어 모델을 아래 캐릭터들로 업데이트할 예정임:
Kumakyuu, Kumayuru, Lurina, Farrat (왕), Kitia (왕비), Karin, Sanya, Helen, Ans, Mylene, Cattleya
데이터셋
KumaBear 5113
애니메이션 스크린샷 5042
팬아트 37
공식 아트 15
라이트노벨 일러스트 19
Roukin8 2948 (스크린샷만)
정규화 이미지 약 30,000장
훈련
처음 9739 스텝 훈련 후 재시작하여 추가로 20494 스텝 훈련
clip skip 1, 해상도 512, 배치 사이즈 8, JosephusCheung/ACertainty 기반
2.5e-6 코사인 스케줄러, Adam8bit, 조건부 드롭아웃 0.08
--
지원이나 명예를 필요로 하지 않지만, 제가 훈련한 모델을 사용하고 있으며 유용하다고 느끼시는 것을 알고 싶습니다.
또한 더 많은 프랜차이즈 모델의 필요성에 대해 강력하게 주장하고 싶습니다.
관심 있으신 분은 제 워크플로우를 확인해 보세요: https://github.com/cyber-meow/anime_screenshot_pipeline
저는 단순히 하나의 LoRA에 단일 개념만 인코드할 필요가 없다는 사실을 더 널리 퍼뜨리고 싶을 뿐입니다.


















