BArtstyle | Blue Archive Art Style LoRA | 碧蓝档案画风模型 | ブルーアーカイブ画風モデル

세부 정보

파일 다운로드

모델 설명

이 모델에 너무 많은 시간을 낭비했다... 아마도 이 업데이트가 마지막이 될 것이다. 4090가 내게 부담되지 않을 때쯤에는 SDXL에 집중할 수도 있고, 그렇지 않다면 다음 6개월 안에 4090가 여전히 너무 비싸면 내가 만든 다른 LoRA를 고치는 데 박차를 가할 수도 있다.

원래의 결정은 업데이트에 DreamBooth를 사용하는 것이었지만, 나는 3060을 사용하고 있으므로 시간 소모가 좋지 않다. 그래서 여전히 LoRA를 사용한다.

REv3 변경 로그:

  1. 베이스 모델이 이제 3가지 버전으로 나뉘며, 각각 다른 특징을 가짐:

    • CF3 - 리플리카 예술 스타일과 사용자 친화성 사이의 좋은 균형을 가짐.

      • CounterFeitV3(그리고 CF3가 혼합된 모델들, 예: PrimeMix/MixPro)에서 사용해야 함.

      • Anything 시리즈와는 절대 사용하지 마세요. 시도해봤는데 매우 망가짐.

    • Silicon29 - Silicon29-Dark로 훈련되었으며, 약간의 BA 청정 라인 아트 손실을 감수했지만, CF3 버전보다 더 BA 스타일의 생생한 색상 + 여명 효과를 가짐.

      • 절대 추천(적어도 한번 시도해보시길!)

      • 베이스 모델의 특성을 유지하면서도, 비베이스 모델과의 다양한 조합이 가능함.

      • 핑크 테마는 약점. BA 파이널의 블루 핑크 그라데이션 풍경을 생성하고 싶다면, CF3/ANY 버전을 사용하세요.

    • ANY - ANYv5로 훈련되었으며, CF3나 Silicon29보다 사용이 더 까다롭지만, 가장 BA 스타일에 가까움. AnythingV5 또는 그것을 기반으로 한 모델을 사용할 때에만 추천.

  2. 데이터셋 전면 개편

    • 버킷으로 전송하기 전에 수동으로 크기 축소 + 노이즈 제거하여 앨리어싱을 방지함.

    • 훈련 해상도는 1024x768입니다. 가로 이미지를 생성하는 것이 세로 이미지보다 더 좋습니다. 생성 해상도 제안:

      • 432x768 (수직, 1080P의 x2.5)

      • 960x544 (수평, 1080P의 x2)

  3. 개념 변화

    • 이제 전형적인 BA 스타일(파란 하늘 + 현대 도시 / 폐허가 된 교실 + 물)은 자체적인 개념을 가짐.

      • 트리거 단어: 파란 하늘
    • 파란 테마는 이제 야간 이미지를 생성할 수 있음.

    • 미리보기 (Silicon29 버전 테스트)

  4. 블록 가중치 학습

    • 더 보수적인 세트를 사용함. 이로 인해 더 많은 해부학적 영향을 주되, 효과를 크게 희생시키지 않음.

    • REv3를 사용할 경우, LoRA 가중치는 1까지 올릴 수 있음. 왜냐하면 해부학이 기본적으로 무망하기 때문이죠 XD

      • 말장난은 제쳐두고, v9b는 평범한 해부학을 위해 너무 많은 색상을 희생시키지만, 여전히 높은 가중치로 사용하기 어렵다.

      • REv3의 해부학은 v7보다 더 나은 것 같음.

  5. 몇 가지 샘플러를 테스트해보았다.

    • 결론: RestartDPM++ 2M Karras > DPM++ 2S a Karras > SDE를 사용하는 모든 샘플러

      • UniPC는 Restart의 낮은 버전에 가깝다.

      • DPM++ 2S a Karras는 평범한 모델과 가중치에서 과도하게 포화되는 경향이 있음. 나쁘지는 않지만 BA 스타일이 아니므로, 이 샘플러에서는 낮은 가중치를 사용하는 것이 좋음.

      • Restart 및 DPM++ 2M Karras는 일반적인 상황에서 파란 또는 녹색 점, JPEG 아티팩트와 비슷한 현상을 일으킴. 이 문제는 베이스 모델의 문제이므로 고칠 수 없음(다시 말해, CounterFeit V3는 상대적으로 좋은 예술성을 제공하지만, 프롬프트 중심에 초점이 맞춰져 있어 모델 자체가 과도하게 훈련되었음(나는 이것이 왜 VAE에 매우 민감한지에 대한 이유라고 믿음).)

      • ↑ 이 이유로, 이 LoRA 모델을 사용할 경우, CFv2.5의 VAE를 사용해야 함.

==================

V9b 변경 로그:

  1. 베이스 모델을 CounterFeit V3로 변경함.

  2. 블록 가중치 학습 사용. 해부학은 V7보다 훨씬 좋아짐.

  3. BAPV는 더 이상 트리거 단어로 사용되지 않음. 여전히 색상 테마로 전형적인 색상을 트리거할 수 있음.

  4. 최상의 결과를 위해서는 DPM++ 2S a Karras 샘플러와 4x-ultrasharp를 업스케일러로 사용해야 함.

알려진 문제:

  1. 더 나은 해부학을 위해 색상 이동이 심각하게 희생됨. 마지막 미리보기를 확인하세요. V9b는 전체 이미지의 구성과 캐릭터 포즈에 덜 영향을 미침. 블록 가중치 학습 없이 색상이 더 좋은 버전을 출시할 수도 있겠지만, LoRA 블록 가중치를 올바르게 사용하는 방법을 아는 것이 중요합니다.

  2. 밤시간에도 고대비의 이단 색조 그림자를 낼 수 있음. 어두운 장면을 생성해야 할 경우 야간 개념과 함께 사용하는 것을 고려하세요.

  3. 상대적으로 높은 가중치(0.7 이상)를 사용하면 여전히 잘못된 구성이 발생할 수 있음. 영향을 줄이기 위해 LoRA 블록 가중치(LBW)와 OUTALL 설정을 사용하는 것이 좋습니다. LBW를 사용할 경우, 최대 1까지의 가중치도 가능합니다.

V7: 훈련 데이터가 Blue Archive의 PV 및 CG 스크린샷을 기반으로 하므로, NSFW 콘텐츠에는 적합하지 않음.

V9가 더 나을 수도 있지만, 아직 시도해보지 않았습니다. 자유롭게 직접 시도해보세요!

0.60.7의 가중치가 충분히 좋습니다. 약 0.40.8 사이가 작동하는 구간이며, 높은 가중치는 더 좋은 색상 조합을 주지만 해부학은 더 나빠집니다.

==================

그리드에서 색상 테마 지원 (V7 샘플):

여전히, 캐릭터 LoRA와 함께 사용하지 않을 때만 완벽하게 작동함. 캐릭터 LoRA를 사용해도 유사한 결과를 얻을 수 있지만, 인내심이 필요함. V9b는 훨씬 더 나았지만, 여전히 운을 시험해야 할 수도 있음.

아래 방법은 오래된 LoHA 버전에만 해당됩니다.

===============

Bluemix (4g ckpt 모델)와 비교했을 때, 이 LoHA는 캐릭터 LoRA와 함께 사용하는 데 더 우수함. 캐릭터의 얼굴 특성과 옷차림을 유지하되, 선과 색상만 변화시킴(색상 필터처럼, 완전히 다른 예술 스타일로는 변화되지 않음).

만약 캐릭터를 완전히 BA 예술 스타일로 바꾸고 싶거나, LoRA 캐릭터의 옷차림에 신경을 쓰지 않는다면, BlueMix를 추천함.

제안:

  • 기본 환경을 자연어로 생성 (예: 한 여성이 강 옆에 서 있습니다.)

  • 가중치 0.8~1 (결과가 더 좋지만 해부학이 더 나빠짐, 반대로 우려될 경우 낮은 가중치 사용)

  • 기본 해상도: w나 h가 768x768보다 낮아야 함. 이를 초과하면 이미지가 더 자주 깨짐.

  • 베이스 모델: anyv3/v5 추천, AOM 시리즈나 가짜 모델 같은 기름 그림/연필 그림 모델은 권장하지 않음. 사용 가능하지만, 색상 필터 역할만 가능함.

  • 환경 프롬프트 (여전히 작동함!):

    • Blue Archive 스타일 테마 (밀레니엄?): 나무, 구름, 도로, 도시, 낮, 파란 하늘, 야외

    • 일본 테마 (백기야코?): 구름, 낮, 야외, 벚꽃

    • 야간하늘: 밤, 야간 하늘, 별이 가득한 하늘

    • Blue Archive CG의 태거들로 생성된 다른 태그도 시도 가능함.

===

저는 LoHA/예술 스타일 모델을 만드는 법을 배우고 있습니다. 이것이 제가 처음 시도한 결과이며, 제 PC는 테스트하기에 다소 부족하므로 더 많은 피드백을 받기 위해 공개합니다. 기본적으로 알파 테스트이며, 모델은 작동하지만 사용자 친화성은 떨어집니다.

좋은 결과를 얻으려면 LoRA 블록 가중치 사용법을 알고 있어야 함.

이를 모를 지 모르지만 새로운 기술을 배우고 싶다면 아래 가이드를 읽어보세요.

목표는 대부분의 캐릭터 LoRA와 호환되는 예술 스타일 LoHA를 만드는 것입니다.

그래서 Animefull-pruned로 훈련했으며, 이 모델에서 완벽하게 작동하고, Anything V3에도 잘 작동하며, AnythingV4.5에서는 캐릭터 LoRA 없이 작동하지만, Counterfeit나 AOM3에서는 거의 작동하지 않습니다. 이 모델들에서는 예술 스타일이 아니라 색상 필터처럼 작동할 가능성이 큼.

아마도 AnythingV4.5를 기반으로 한 다른 버전을 훈련해야 할지도 모릅니다. 예술 스타일 훈련에 대한 제안이 있으시면 알려주세요. 그에 대해 매우 감사하겠습니다.

태그 없이도 작동할 수 있지만, 때때로 이상한 색상이 나올 수 있음.

더 안정적인 결과를 위해 아래 태그 그룹을 사용하세요:

  • Blue Archive 스타일 테마 (밀레니엄?): 나무, 구름, 도로, 도시, 낮, 파란 하늘, 야외

  • 일본 테마 (백기야코?): 핑크 테마, 구름, 낮, 야외, 벚꽃

  • 야간하늘: 파란 테마, 밤, 야간 하늘, 별이 가득한 하늘, 도시 풍경

  • Blue Archive CG 태거들이 생성한 다른 태그도 시도 가능함.

캐릭터 LoRA를 입력하려면 LoRA 블록 가중치와 함께 사용하는 것이 좋습니다. 웹 UI 플러그인으로 받을 수 있습니다. 그렇지 않다면 이 모델의 가중치를 0.6 이하로 낮춰야 하며, 이 경우 작동은 다소 나쁘지만 여전히 가능합니다. 그렇지 않으면 이미지 색상이 매우 나빠질 수 있음.

↓만약 이런 이미지를 얻었다면, 아트스타일 모델의 가중치를 떨어뜨리거나 아래 방법을 사용하세요.

LoRA 블록 가중치를 사용할 때는 2가지 방법이 있음:

  • A: 기본적으로 아래와 같이 캐릭터 LoRA의 아트스타일을 제거해야 함:

    <YourCharaModelName:1:1,1,1,1,1,0,0,0,1,1,1,1,1,1,1,0,0>

    이 모델에 :ALL을 추가하는 것을 잊지 마세요. 그렇지 않으면 작동하지 않을 수 있습니다.

    예: <BArstylev1c:1:ALL>

  • B: 만약 캐릭터 외모에 이 모델이 명백하게 영향을 주고 있음을 감지했다면, 아트스타일 모델의 색상만 유지하면서 아래와 같이 설정할 수 있음:

    <BArstylev1c:1:1,0,0,0,0,0,0,0,0,0,0,0.8,1,1,1,1,1>

    이 경우 캐릭터 모델을 전체 유지할 수 있음.

    예: <YourCharaModelName:1:ALL>

  • 기본적으로, 방법 A는 방법 B보다 원래 아트스타일에 더 가까움.

  • LoHA 모델은 더 많은 블록 가중치를 가지는 것 같지만, 제 PC는 이곳에서 쉽게 충돌하므로 테스트할 시간이 거의 없음. 관련 정보가 있다면 알려주세요. 하지만 지금까지 LoRA 블록 가중치 사용은 문제없이 작동함.

  • ↓ 여전히 올바르게 설정했지만 여전히 이런 이미지가 나온다면, 두 번째 방법을 사용해보세요.

캐릭터에 영향을 받았을 때 방법 A

방법 B

이 모델로 만든 이미지

이미지를 찾을 수 없습니다.