StablyDiffused's Magnum Opus
세부 정보
파일 다운로드
이 버전에 대해
모델 설명
라이선스
소개
이 모델은 매우 오랜 기간에 걸쳐 개발되었습니다. 제 Aesthetic Mix와도 다를 뿐만 아니라, Wild Mix와도 다릅니다. 두 모델의 조합에 더해 보다 특별한 요소를 추가한 것입니다. Aesthetic Mix와 Wild Mix의 특징을 많은 부분 그대로 가져왔지만, 새롭게 추가된 요소도 있습니다. 이 혼합 모델은 매우 다양한 가능성을 지니고 있으며, 지금까지 제가 느끼기로는 그 가능성의 끝을 훨씬 넘어서는 곳까지 도달하지 못했죠. 여러분이 이 모델로 어떤 작품을 만들어낼지 기대됩니다. 버전 1은 여전히 개선이 필요하다고 생각되지만, 현재 상태에서도 매우 우수하며 사용하기도 매우 쉬워요. 그래서 저는 이 상태에서 공개하고, 더 나은 개선 방안을 찾는 동안 다른 분들이 활용할 수 있도록 하기로 결정했습니다. 지금의 상태로도 다양한 프롬프트와 잘 어울리며, 프롬프트를 잘 따르고 다양한 콘텐츠를 생성할 수 있습니다. 출력하는 이미지의 일관성이 매우 뛰어나며 해부학적 구조도 꽤 좋습니다.
프롬프팅
이 혼합 모델은 일반적으로 매우 직관적으로 프롬프팅할 수 있습니다. 제 Aesthetic Mix나 Wild Mix와 함께 사용하는 표준 프롬프트를 아무리 써도 잘 작동합니다. Protogen에 흔히 쓰는 프롬프트를 비롯해 다양한 유형의 프롬프트를 처리할 수 있으며, 일부 다누보 태그도 지원합니다. 다만 일부 태그는 혼합 과정에서 사라지는 경우가 있습니다 (고강도 성적인 표현은 잘 처리하지 못함). 하지만 NSFW(소프트코어) 또는 SFW 콘텐츠에는 매우 능숙합니다. NSFW에 치우치는 경향은 보이지 않지만, 3D 렌더링 스타일로 생성하는 데 편향이 있습니다. 만약 진정으로 사실적인 이미지를 원한다면, '3d'를 음성 프롬프트에 넣어 주세요. 저는 항상 프롬프트에 'masterpiece, best quality'를 넣고, 음성 프롬프트에 'worst quality, low quality'를 넣는 것을 권장합니다. 사실적인 이미지를 원한다면 'photorealistic'이라는 텍스트도 함께 넣는 것을 추천합니다.
제작법
아래는 이 릴리즈에 이르기까지 제가 이르게 된 과정의 매우 장황한 설명입니다. 줄인 말로 말하자면: 이 작업은 정말 끝없이 고된 일이었으며, 여러차례 빛을 보지 못할 뻔했습니다. 저는 수많은 버튼을 눌렀고, 그것들은 저에게 반박했고, 그 후 많은 것을 합쳤고, 제가 마음에 들어하는 결과물을 만들어냈죠.
처음에는 Aesthetic Mix를 RPG v4를 사용하도록 업그레이드하려는 시도였습니다. 하지만 그 작업이 끝난 후 결과에 만족하지 못했습니다. Aesthetic Mix에 실질적인 개선이 생기지 않았고, 오히려 미미한 변화만 있었을 뿐입니다. 그 바탕이 되는 제작법은 다음과 같습니다 (나중에 중요한 정보이며, MagnumOpus 혼합 모델의 기본이 되지만, 공개되지 않은 레시피입니다).
Aesthetic_v1.1: f222_v1 + elldrethSImagination_v10 @ 0.85
Aesthetic_v1.2: hassanBlend1512And_hassanBlend1512_1 + Aesthetic_v1.1 @ 0.85
Aesthetic_v2.7: Aesthetic_v1.2 + (rpg_v4 - v1.5-pruned-emaonly) @ 0.20
Aesthetic_v2.8: Aesthetic_v2.7 + (seek_art_mega_v1 - v1.5-pruned-emaonly) @ 0.25
Aesthetic_v2.9: Aesthetic_v2.8 + (modelshoot-1.0 - v1.5-pruned-emaonly) @ 0.15
Aesthetic_v3.0: Aesthetic_v2.9 + openjourney-v2-unpruned @ 0.05
Aesthetic_v3.1: Aesthetic_v3.0 + analog-diffusion-1.0 @ 0.05
Aesthetic_v3.2: Aesthetic_v3.1 + dreamlikePhotoRealV2 @ 0.10
Aesthetic_v3.3: Aesthetic_v3.2 + hasdx_hasedSdx @ 0.10
Aesthetic_v3.4: Aesthetic_v3.3 + (hassanBlend1512And_hassanBlend1512_1 - Aesthetic_v3.3) @ 0.15
Aesthetic_v3.5: 툴킷에 로드, fp16로 정리, CLIP 수정
Aesthetic Mix를 다시 구축한 이후 다소 실망했지만, 어차피 해볼 만하니 WildMix와 합쳐보기로 했습니다. 그 결과는 실제로 매우 놀라운 것이었습니다. Aesthetic Mix의 아름다움과 WildMix의 강렬한 색감이 모두 포함되어 있었고, 정말 인상 깊었으며 마음에 들었습니다. 그래서 이걸 Aesthetic Mix의 업데이트로 출시할까 고민하다가, Aesthetic Mix의 모든 NSFW 콘텐츠가 완전히 무력화되어 있음을 발견했습니다. 완전히 파괴된 것은 아니었지만, 과거처럼 잘 작동하지 않았습니다. 다리가 벌어진 시체를 만들기 힘들었고, 생식기 부분은 종종 1개 이상의 불필요한 선이 생기며, 젖꼭지 텍스처가 왜곡되었습니다. 마음에 들긴 했지만, 동시에 마음에 들지 않았습니다. 참고로 제 Wild Mix의 제작법은 다음과 같습니다.
ProtoDucHaitenMix_v5: Protogen 5.3 + (DucHaitenAIArt 2.0 - v1.5-pruned-emaonly5) @ 0.5
WildMix_v2.1: ProtoDucHaitenMix_v5 + (kenshi_10 - Anything-V3.0) @ 0.5
WildMix_v3: WildMix_v2.1 + SynthPunkSearch_raw @ 0.30
WildMix_v3.1: WildMix_v3 + vintedois-v1 @ 0.15
WildMix_v3.2: WildMix_v3.1 + (rpg_v4 - v1-5-pruned-emaonly) @ 0.20
WildMix_v3.3: WildMix_v3.2 + rfktrsDarkdream_v16 @ 0.1
WildMix_v3.4: WildMix_v3.3 + dreamlikePhotoRealV2 @ 0.1
WildMix_v3.5: 툴킷에 로드, fp16로 정리
WildMix_v3.5.1: CLIP 위치 수정
Baked in Standard 1.5 VAE
그 후, 저는 이름을 'Stably Diffused의 실험적 혼합'이라고 지은 새로운 혼합 모델을 만들었습니다.
StablyDiffusedExperimentalMix_v1: WildMix_v3.5.1 + AestheticMix_v3.5 @ 0.50
이후, 저는 길을 떠났습니다. 제가 새로 만든 실험적 혼합 모델에 더 나은 NSFW 콘텐츠를 넣는 방법을 찾기 위한 일이었습니다. 결국 저는 잠시 포기했습니다... 한시적입니다. 제가 시도한 모든 방법은 실험적 혼합 모델의 해부학적 구조를 망가뜨리거나, 문제 해결에 전혀 도움이 되지 않았습니다.
그래서 저는 방향을 바꾸어 좀 더 다른 작업을 해볼까 생각했습니다. 제작된 모델이 포도🍊 4에 기반한 애니메이션 특화 혼합 모델이었으며, 원래 포도🍊의 느낌을 유지하면서도 반사실적인 2.5D 스타일로 몰아가고자 했습니다. 일부 결과는 꽤 좋았지만, 매번 성공을 거두면 포도🍊의 더 강렬한 특징은 계속 사라졌고, 완전히 파괴되었습니다. 또 한 번의 우연히, 제가 만든 이식으로 실험적 혼합 모델에 합성해 봤고, 그 결과는 기대 이상이었습니다. 포도🍊의 강렬한 특징은 여전히 유지되지 않았지만, 실험적 혼합 모델의 NSFW 능력은 향상되었고, 실험적 혼합 모델의 매력을 잘 유지했습니다. 다만 문제는 실험적 혼합 모델에 있던 사실감이 크게 잃어버렸고, 결국 2.75D 정도의 결과물이 나왔다는 점이었습니다. 멋있긴 했지만, 충분히 멋지진 않았습니다. 그래서 새로운 여정을 시작하게 되었죠. 실험적 혼합 모델의 NSFW 능력을 해결할 수 있는 방법을 찾았지만, 동시에 사실감을 유지하려는 목표도 가져야 했습니다. 이미 저는 Auto1111의 Merge Block Weighted 확장을 사용하는 법을 배웠고, 모델을 합치는 다양한 방법을 탐색하고 있었습니다. 그 결과, 다음의 제작법으로 이렇게 호소력 있는 2.5D 반사실적인 애니메이션/NSFW 기반 모델을 만들 수 있었습니다. 이 모델은 좋은 해부학적 구조, 좋은 눈, 그리고 아름다운 미학적 요소를 갖추고 있습니다. 아랫쪽 버전들에서 수많은 빠진 번호를 보게 되실 겁니다. 이건 실패한 시도들입니다. 언급하지 않겠습니다.
AnimeNSFWBase:
AnimatedNSFWBase_test_3: MergeBlockWeightedMerge::
Model A: Corneos 7th Heaven V2
Model B: Grapefruit_v4
Base Alpha: 0
Preset Weights: SMOOTHSTEP*2
AnimatedNSFWBase_test_4: MergeBlockWeightedMerge::
Model A: dantiondrawmix_20
Model B: AnimatedNSFWBase_test_3
Base Alpha: 0
Preset Weights: SMOOTHSTEP*2
AnimatedNSFWBase_test_5: MergeBlockWeightedMerge::
Model A: AnimatedNSFWBase_test_4
Model B: anidosmixV2_anidosmixV2
Base Alpha: 0
Preset Weights: SMOOTHSTEP*2
SR_AnimeNSFW:
SR_AnimeNSFW_v0.6: MergeBlockWeightedMerge::
Model A: perfectWorld_perfectWorldBakedVAE
Model B: AnimatedNSFWBase_test_5
Base Alpha: 0
Preset Weights: SMOOTHSTEP*2
SR_AnimeNSFW_v1.2: MergeBlockWeightedMerge::
Model A: chilloutmix_NiPrunedFp16
Model B: SR_AnimeNSFW_v0.6
Base Alpha: 0
Preset Weights: SMOOTHSTEP*2
SR_AnimeNSFW_v1.5: MergeBlockWeightedMerge::
Model A: duchaitendarkside_v30
Model B: SR_AnimeNSFW_v1.2
Base Alpha: 0
Preset Weights: SMOOTHSTEP*2
SR_AnimeNSFW_v1.6: SR_AnimeNSFW_v1.5 + modelshoot-1.0 @ 0.10
SR_AnimeNSFW_v1.7: SR_AnimeNSFW_v1.6 + dreamlikePhotoRealV2 @ 0.15
SR_AnimeNSFW_v1.8 Prune to fp16 (fix broken clip)
이제야 드디어 MagnumOpus mix v1이 탄생하게 됩니다:
MagnumOpus_v1.0: MergeBlockWeightedMerge::
Model A: StablyDiffusedExperimentalMix_v1
Model B: SR_AnimeNSFW_v1.8
Base Alpha: 0
Preset Weights: SMOOTHSTEP*2
감사의 말
이 혼합 작업에 사용된 모든 모델과 그 링크 목록입니다.