MyMIX-G/Jem
세부 정보
파일 다운로드
이 버전에 대해
모델 설명
설명
실험적인 LoRA 튜닝 믹스입니다. 취향에 맞지 않을 수 있습니다. 상업적 사용은 자제해 주시고, 재믹스하는 것은 자유롭게 해 주세요. 부정적 임베딩은 품질에 필수는 아니지만 도움이 될 수 있습니다.
Gyozamix 레시피를 크게 수정했습니다. 각 모델 간 차이점은 다음과 같습니다:
MIX-GEM-T1: 이 모델은 기름 물감 텍스처와 유사한 느낌을 목표로 합니다. 매우 원시적인 LoRA 튜닝으로, 두 개의 아트스타일 학습 LoRA를 지배-종속 비율로 단순 혼합한 것입니다. 기반 프레임워크는 대부분 임의의 혼합 결과로 나온 ad-hoc 방식이며, 예상치 못하게 좋은 결과를 얻었습니다. 프롬프트에 대체로 잘 반응합니다.
MIX-GEM-T2: (EternalWinter로도 불림) 이 모델은 이전의 기름 물감 세부 튜닝을 기반으로 하며, 매우 섬세한 느낌을 주기 위해 추가 작업을 수행했습니다. Galko, Suzuki Ken'ya의 만화가 스타일의 흔적이 일부 포함되어 있습니다. 그 결과 눈 주변, 특히 속눈썹이 매우 섬세한 특징을 보입니다.
MIX-GEM-T2A: (업로드되지 않음) T2의 더 나은 세부화 버전입니다. 전반적으로 더 많은 디테일을 포함하며, 대비를 더 강조하려는 경향이 있습니다.
MIX-GEM-T3: 병합 과정 중 일부 특이점과 재료 조정을 고려하지 못한 탓에, 이 모델은 강한 만화풍 스타일을 띱니다. T2의 섬세함은 일부 잃었지만, 더 과장된 특징을 얻었습니다. 이 방향을 연구하는 데는 흥미로운 선이지만, 저의 선호도가 아니므로 이 경로는 더 이상 진행하지 않았습니다.
MIX-GEM-T2_2: T2의 포괄적인 재작업 버전입니다. 기본적으로 MIX-GEM-T3 레시피를 기반으로 하되, T3에서 발생한 과도한 만화풍 스타일의 불균형을 수정했습니다. 추가로 CLIP 스왑을 적용해 프롬프트에 대한 순응도를 높였습니다.
저는 출력물을 수정하기 위해 여기에서 제공하는 LoRA를 자주 사용합니다. 캐릭터, 복장, 포즈 LoRA는 모두 적합합니다. 이 모델은 이미 스타일이 확립되어 있으므로 스타일 LoRA를 사용할 의의가 크지 않습니다. 이 모델은 다목적용이 아닌, 그런 용도로는 Based66, AuroraOne 또는 Amedira를 사용하세요.
이 모델은 HuggingFace 저장소가 없습니다. 레시피(제가 제공할 경우)는 사이드바에 있습니다.
SDXL 업데이트 2024년 4월 15일
우리가 다시 SDXL로 돌아왔습니다, lol. @penterested에게 사과합니다, 제가 거짓말했네요, lol. 현재 가장 좋아하는 아티스트들이 AnimageXL에 트레이닝되지 않았기 때문에 Pony를 사용하고 있습니다:
MIX-GEM-WXL-D2nai: Pony Diffusion for Anime을 기반으로 합니다. 세계관의 부족을 보완하기 위해 Worldly_XL을 기본 수준에서 통합했습니다. LoRA와 매우 호환됩니다. T(aste) 버전으로 공개할까 고민했지만, novelai가 유일하게 모델 내재 스타일을 유지할 수 있는 SDXL 모델이므로, 지역적 요소는 LoRA로 보완하는 것이 좋습니다.
- MIX-GEM-WXL-D2naiK: D2nai의 변형으로, 스타일 LoRA가 내장되어 있습니다. 다른 스타일 LoRA와 여전히 호환됩니다.
MIX-GEM-WXL-ZA1: ChromeshineXL로도 알려져 있습니다. D2naiK와 마찬가지로 내재된 스타일을 부여합니다. D2nai와 비교해 조명이 향상되고 로봇 소녀 및 몬스터 소녀(특히 센터우르)에 대한 개념 인식이 향상되었습니다. D2nai의 현실적인 경향에서 더 벗어나고, 현실성을 제거하기 위한 프롬프트 키워드 양도 점차 줄어들고 있습니다.
MIX-GEM-LXS-QromEW: 이 버전은 Pony Diffusion for Anime 기반에서 벗어났습니다. 단발성인지 향후 계속될지 아직 확신하지 못합니다. 기본적으로 단일 스타일에 특화되어 있으며, 그 목적을 꽤 잘 달성합니다. ChromelightXL을 사용하며, 이는 MIX-GEM-WXL-ZA1에서 추출되었지만, MIX-GEM-XL 계보의 다른 모델과는 연결되어 있지 않습니다. 이는 아마도 죽은 진화 경로일 가능성이 높으나, LS Eqos가 매우 강력하고 다목적 기반임을 느껴, 병행 진화가 있을 수 있습니다. 이 모델은 스타일 LoRA에 완전히 반응하지 않습니다.
MIX-GEM-LXS-ZA1: (업로드되지 않음) ChromeShineXL의 고유한 감각을 LS Equos에 적용해보려는 시도였습니다. 별로 잘 되지 않았습니다. LS Equos + ChromeLightXL이 더 나은 결과를 보였습니다. ChromeShineXL과 비교해 워터마크가 적고 배경이 더 나으며 포즈가 더 역동적이었지만, 캐릭터 간 상호작용 이해력이 크게 떨어지고 조명 및 톤에서도 큰 저하가 있었습니다.
- MIX-GEM-XLS-ZA1.trainD: 최종적으로 D2nai의 초기 차이점을 LS Equos에 학습시켜 최종 수정을 병합했습니다. 이는 ChromeshineXL_MP입니다. 실제 모델 페이지에는 비교 세부 정보가 더 많지만, 요약하자면 LoRA 사용이 더 쉬우며 덜 까다롭지만, 구도 감각은 일부 손실되었습니다.
Adam8wit-QEgooW: 사이드바는 이 탭에서 제가 의도한 것보다 훨씬 더 포괄적이지만, 핵심은 PonyXL T2_2 LyCORIS를 활용하기 위해 대대적으로 재병합한 것입니다. 매우 깔끔하고 피부 톤과 조명이 뛰어나며(포니 기준으로) 배경도 꽤 좋지만, 2.5D 쪽으로 기울어지는 경향이 있습니다. 제 추천은 가능한 한 캐릭터 LoRA와 함께 사용하여 과도한 2.5D 경향을 완화하는 것입니다. 물론 그런 스타일을 좋아한다면 마음껏 활용하세요. ChromelightXL과 결합하면 밀페이스를 다시 되찾을 수 있습니다.
NAI-XL 업데이트 2025년 1월 11일
개인적으로, Illustrious의 텍스트 인코더가 Pony만큼 심각하게 훼손되지 않았기 때문에 Illustrious 기반의 스타일 믹스는 신뢰하지 않습니다. 그러나 현재 Itercomp와 Cyberfix를 실험 중인데, 이들은 기본 모델에 통합되어 구도 감각과 일반적인 해부학을 개선하기 때문입니다. 그래서 어떻게 작동하는지 확인해보기로 했습니다.
지금까지의 결론은, 기본 모델로는 실제로 꽤 인상적이지만, 스타일 모델로는 별로입니다.
XLVpred06: LHC (Large Heap o' Chuubas)를 기반으로 하며, 이는 자체적으로 NAI-XL vpred06을 기반으로 합니다. 솔직히 말해, LHC를 NAI-XL보다 선택한 이유는 디스크 공간을 확보하기 위해 vpred06을 삭제했기 때문입니다. 하지만 매우 잘 작동하며, 기본 NAI-XL보다 캐릭터 지식이 확장되었습니다. 이 모델은 이전보다 SD1.5 버전과 더 유사하며, 사실상 매우 불완전한 PonyXL보다 훨씬 나은 SDXL 기반을 사용합니다.
- XLVpred06DOUBLEcompfixed: 참고로, XLVpred06보다 스타일이 덜 마음에 듭니다. 그러나 이 버전은 병합 실험의 주된 이유였습니다. 이 더블-컴프픽스 버전은 XLVpred06과 비교해 두 가지 프로세스를 거쳤습니다. 스타일과 구도 감각을 향상시키기 위해 Itercomp와 수직 병합했고, 해부학을 개선하기 위해 Cyberrealistic 및 Cyberillustrious와 수직 병합했습니다. Itercompfix 버전은 Cyberrealistic과 Cyberillustrious-fixed 버전 모두와 병합한 후, 두 버전을 서로 다시 병합해 더블-컴프픽스 버전을 완성했습니다. 전반적으로 손실보다 얻는 것이 많으며, 특히 손에 탁월한 향상이 있지만 스타일이 희석됩니다. 같은 방법을 Noob 자체에 적용해볼 계획인데, 기본 모델이므로 스타일 희석이 큰 문제가 되지 않을 것입니다.
XLBD1: Better Days. Illustrious v0.1을 기반으로 하며, 구체적으로
betterDaysIllustriousXL_V01ItercompPerpCyberillustfixPerpWeightedSum05라는 재병합 버전을 사용합니다. 이는 XLVpredDOUBLEcompfixed 방법의 약식 버전입니다. LoRA 병합 없이 어떻게 작동하는지 정말로 알고 싶다면, 여기 또는 여기에서 찾을 수 있습니다. 기본적으로 Better Days에 조명 개선과 훨씬 적은 세피아 색조가 적용된 버전입니다. 일부 x/y 비교 사진은 여기에서 볼 수 있습니다. 이 버전은 eps 기반 모델입니다.