Karmix-XL v0

Karmix-XL v0

Karmix-XL v0는 SDXL(Epsilon-Pred) 기반의 실험적 애니메이션 스타일 텍스트-이미지 모델입니다. 이 모델은 고해상도 잠재 공간 지원, 스타일적 유연성, Danbooru 태그에서 자연어까지 다양한 프롬프트 구조를 해석하는 능력에 초점을 맞춥니다.

다양한 프롬프트를 사용한 모델의 능력을 보여주는 샘플 이미지.

참고: 이 결과는 원본 텍스트-이미지 생성 결과이며, Hires.fix, AfterDetailer, Inpaint 등은 적용되지 않았습니다. 초상화 해상도는 1280x1856, 풍경은 1536x1024입니다.

사용된 소프트웨어는 ComfyUI이며, 업로드된 이미지에는 워크플로우가 이미지 메타데이터에 포함되어 있습니다.

모델 설명

이 모델은 win10ogod이 개발한 원본 스크립트를 수정한 Karcher Mean 병합 방법을 사용하여 생성되었습니다.

모델은 1536x1536 기본 해상도(ILLUSTRIOUS-XL 2.0), 1536+1024 혼합(ILLUSTRIOUS + NoobAI), 그리고 1024x1024 기본 해상도(NoobAI 1.0 기반으로 학습된 OD39_E60)의 모델들을 병합한 결과입니다.

소스 코드:

이 병합에 사용된 수정된 소스 코드는 다음 링크에서 확인할 수 있습니다:

https://github.com/chemwolf118/Karcher-merge

병합 레시피 (v0)

다음 알파 비율을 사용하여 병합을 수행했습니다:

모델 구성 요소 | 비율(Alpha)

• hesperidesIllustrious_v10 | 0.23

• illustriousXLPersonalMerge_v30Noob10based | 0.23

• illustriousXL20_v20 | 0.23 | CivitAI 버전

• OD39_E60_fp16 | 0.31

세부 파라미터:

이 모델은 karcher-iter 30 및 karcher-tol 1e-7로 병합되었습니다. 각 레이어 가중치는 다음과 같습니다:

--alphas 0.23 0.23 0.23 0.31

--alphas-te 0.28 0.18 0.18 0.36

--alphas-unet-in 0.15 0.24 0.15 0.46

--alphas-unet-mid 0.15 0.24 0.15 0.46

--alphas-unet-out 0.28 0.18 0.18 0.36

사용 및 권장 사항

중요: 이 모델은 실험적("v0")입니다. 해상도, 샘플러 설정 및 작성된 아티스트 태그에 따라 다양한 동작을 보일 수 있습니다.

해상도 및 샘플러

이 모델은 고해상도 잠재 공간 생성(최대 1856px)을 지원합니다.

테스트된 해상도: 1280×1856, 1856×1280, 일반적인 1024x1536, 1536x1024.

참고: 일부 경우 1536x2048 및 2048x1536도 가능하지만, 매우 드문 경우이며 모든 프롬프트에서 작동하지는 않습니다.

🚧 모델 한계 및 성능 참고사항

이 모델은 1280x1856 해상도로 직접 생성할 수 있지만, 이러한 고해상도에서 생성되는 품질에는 여전히 한계와 세부적인 특징이 존재합니다.

NoobAI 기반 모델(1024 해상도 기반)이 다수 사용되므로, middle finger/full body 태그를 사용할 경우 태그/포즈/각도에 따라 해부학적 비율이 왜곡될 수 있습니다.

또한 Euler 샘플러를 사용할 때 풍경 방향의 해부학적 왜곡이 발생하는 알려진 문제가 있습니다.

사용 사례 | 권장 샘플러 | 스케줄러 | 참고

• 초상화 | Euler | Normal | 일반적으로 잘 작동합니다.

• 풍경 | DPM++ 2M 또는 3M | sgm_uniform | 중요: 고해상도 풍경(예: 1856x1280)에서 Euler을 사용하면 해부학적 왜곡이 자주 발생합니다.

권장 설정

• 해상도 / 종횡비 - 초상화: 1024x1536~1280x1856, 풍경: 1536x1024

• CFG - 3.5-5 (권장: 4.0-4.3)

• Steps - 28-30

• 샘플러 - Euler

• 스케줄러 - Normal

프롬프트 스타일

Karmix-XL v0는 다양한 프롬프트 구조를 지원하며, 아래와 같이 스타일을 혼합할 수 있습니다:

1. Danbooru 태그

표준 태그 기반 프롬프트.

> 1girl, solo, cat_ears, maid, white apron, smile, looking at viewer, indoors

2. 자연어

표준 SDXL 사용과 유사한 서술적 문장.

> 애니메이션은 긴 검은 머리카락을 가진 성인 여성의 모습을 보여주며, 밤에 발코니 난간에 기대어 있고, 배경에는 도시의 조명이 있습니다.

3. 혼합: 자연어 + 아티스트 태그

장면은 자연어로, 스타일은 태그로 지정합니다.

> 흰 머리와 빨간 눈을 가진 아름다운 애니메이션 소녀, 정교한 드레스를 입은 장면. artist:konya_karasue

4. 복합 혼합

모든 방법을 결합할 수 있습니다:

> 숲 배경의 전사 소녀를 촬영한 영화적 장면. 1girl, 갑옷, 검, 무기 들고 있음. yao liao wang,xilmo, (fkey:0.5), meinoss,dikko

프롬프트 참고: 아티스트 태그에 특정 닉네임(예: tanti_men_(dragon)이 갑자기 드래곤을 생성하거나, chuck_(harfmoondark)이 chuck_(pokemon)을 생성하는 등)을 사용할 때 불필요한 "생물" 또는 객체가 나타나는 문제가 발생하면, 해당 태그에 "artist:"를 사용하는 것이 좋습니다. 예: artist:chuck_(harfmoondark).

버전 이력

• v0 - 2025년 4월 23일 생성, 2025년 4월 28일 HuggingFace에 업로드 | 링크

  • 초기 릴리스.

• v0-CivitAI - 2025년 12월 5일 업로드

기타 버전

다른 병합 방법/파라미터를 사용한 실험적 버전은 다음 링크에서 확인할 수 있습니다:

https://huggingface.co/NullAxis/karmix-merge-experiments

(참고: 이 버전들은 프로토타입이며, 향후 주요 릴리스의 최종 품질을 반영하지 않습니다.)

NullAxis는 Karmix 및 다양한 모델 병합 방법을 실험하기 위해 설립된 조직이며, 현재 웹사이트 nullaxis.dev를 운영하고 있습니다. 기존 작업 및 향후 계획 등 활동 정보는 발생 시 여기에 게시됩니다.

감사의 말

이 프로젝트를 가능하게 해준 기여자 및 개발자들에게 특별한 감사를 드립니다:

• su momo — Karcher-merge 스크립트 개선에 대한 주요 기여, 조언 및 도움

• win10ogod — Karmix를 생성한 Karcher-merge 방법 스크립트의 저자. GitHub | HuggingFace

• 乙酰胆碱 — Karmix에 사용된 아름다운 OD39_E60 모델의 저자

• DammK YaZuXaWa — win10ogod의 Karcher-merge 방법에 대한 원본 정보 제공 및 다양한 도움. GitHub | HuggingFace | CivitAI

• Kurosu Chan — Karmix 초기 문서에 대한 다양한 질문 및 평가 지원. GitHub | Gist | HuggingFace

• Stable Diffusion CN — SDCN 커뮤니티 전체에 감사드립니다.

• Laxhar Lab — NoobAI XL 제공

• OnomaAI — Illustrious XL 제공

• bloodsplash — Hesperides XL v1.0 제공 | CivitAI

• dims2 — Illustrious XL personal merge v3.0 제공 | CivitAI

• 그 외 — 커뮤니티 지원 및 테스트

초기 문서는 이제 아카이브되었으며, 정보는 HuggingFace 모델 카드에서 제공됩니다.

질문, 제안, 피드백이 있으시면 HuggingFace에서 토론을 생성하거나 이메일로 문의해 주세요: [email protected].

라이선스

이 모델은 Fair AI Public License 1.0-SD (Illustrious License) 하에 릴리스됩니다.

또한 NoobAI의 구성 요소도 포함되어 있으며, 이는 자체 사용 조건을 따릅니다. 다음 두 라이선스를 모두 준수해 주세요:

Illustrious 라이선스 조건: https://freedevproject.org/faipl-1.0-sd

NoobAI 라이선스 조건: https://huggingface.co/Laxhar/noobai-XL-1.0/blob/main/README.md#model-license