CitrineDreamMix

개요

CitrineDreamMix는 다양한 스타일에서 다양한 주제를 생성할 수 있는 매우 유연한 모델입니다. 애니메이션과 사실주의 사이의 중간쯤 되는 스타일로 아름답고 세밀한 이미지를 제작하는 데 뛰어납니다. 또한 보루 태그 지원을 통해 NSFW 이미지 및 성적 내용에 강한 초점을 두고 있습니다.

이 모델은 제가 가장 좋아하는 두 모델인 AbyssOrangeMix3 (AOM3)와 NeverEnding Dream (NED)의 병합 버전입니다. 이 두 모델의 작업물에 대해 어떤 저작권이나 소유권도 주장하지 않습니다.

AbyssOrangeMix3는 정교한 애니메이션 스타일의 일러스트 이미지를 만들기에 뛰어나지만, 너무 많은 세부 요소를 추가하거나 사실주의에서 벗어나는 경향이 있습니다. 그러나 허구의 캐릭터와 NSFW 콘텐츠 처리는 매우 잘 하며, 더 소규모의 세부 콘텐츠도 잘 처리합니다.

NeverEnding Dream은 깔끔하고 사실적인 이미지를 만들기에 탁월하지만, 세부 사항을 지나치게 단순화하거나 제한하는 경향이 있어 이미지가 다소 평평하고 기본적인 느낌을 줄 수 있습니다. 또한 특정한 허구 캐릭터나 NSFW 상황, 특히 사실주의를 벗어난 경우에 대한 처리가 어려울 수 있습니다.

CitrineDreamMix의 목적은 AOM3와 NED 사이의 최적의 균형을 찾아 양쪽의 최고의 점을 모두 활용하는 것입니다. AOM3보다는 사실적인 스타일이었고, NED보다는 애니메이션 스타일이 더 강한 특징을 지닙니다. 이를 통해 빅 아이 같은 애니메이션 스타일의 신체적 특징을 유지하면서도 사실주의 쪽에서 우수한 정밀도와 부드러운 디테일을 유지할 수 있습니다.

아래는 CitrineDreamMix를 AOM3와 NED와 비교한 이미지들로, 각 모델의 스타일 차이를 확인할 수 있습니다. 예시 이미지에도 다소 큰 사이즈의 비교를 추가했습니다. 모든 모델은 프롬프트 키워드를 통해 사실주의나 애니메이션 스타일로 유연하게 조정할 수 있으므로, 비교를 위해 프롬프트를 비교적 간단하게 유지했습니다. 모든 모델이 아름다운 이미지를 생성하므로, 결국 주제와 개인적 취향에 따라 선택하는 문제입니다.

모델 비교:

프롬프트

프롬프트 사용에 대한 주요 추천사항은 AOM3와 NED 둘 다 보루 태그를 사용하도록 훈련되었기 때문에, 보루 태그를 적극 활용하는 것입니다. A1111를 사용 중이라면, 태그 형식을 쉽게 이해할 수 있도록 Booru 태그 자동완성 확장 프로그램을 강력히 권장합니다.

더 사실적인 스타일을 원하면 프롬프트에 "realistic"을 포함시키고, 애니메이션 스타일을 원한다면, 음성 프롬프트에 "realistic"을 사용하십시오. 큰 차이를 보이려면 가중치를 높여야 할 수 있습니다.

음성 프롬프트에는 bad_prompt_version2, EasyNegative, bad-artist, bad-hands-5와 같은 인기 있는 음성 임베딩을 사용하고 있습니다. 그러나 이들의 효과에 대해 광범위한 테스트를 하지 않았기 때문에, 필수사항이라고 생각하지 말아야 합니다.

설정

고지 사항:

저는 스테이블 디퓨전이나 AI 이미지 전문가가 아니기 때문에, 저의 모든 제안을 매우 큰 논란의 여지 있어 받아들여야 합니다. 이 설정들은 제한된 테스트 후에 제게 가장 잘 작동한 몇 가지 설정일 뿐이며, 개인이 설정을 실험해 자신에게 가장 적합한 것을 찾아야 합니다.

샘플링 방법:

저는 DPM++ SDE Karras가 가장 잘 작동하는 것으로 확인하였고, 그 다음으로 DPM++ 2M Karras, Euler a, Heun이 있었습니다. 그러나 설정과 원하는 결과에 따라 거의 모든 방법이 잘 작동할 수 있습니다.

샘플링 단계:

저는 대략 20단계가 제게 가장 적합했지만, 10에서 30단계 사이의 범위에서도 거의 유사한 결과를 얻었습니다. 사용하는 샘플링 방법에 따라 결과가 다를 수 있습니다.

CFG 스케일:

일반적으로 저는 CFG 스케일 7을 사용하지만, 5에서 9 사이의 범위도 거의 동일한 결과를 제공했습니다. 10 이상의 경우 때때로 이상한 아티팩트나 비율이 어긋나는 현상이 발생할 수 있으므로, 너무 높게 설정하지 않도록 주의해야 합니다.

CLIP 스킵:

CLIP 스킵 2가 CLIP 스킵 1보다 약간 더 나은 결과를 얻었지만, 둘 다 잘 작동합니다. CLIP 스킵 1은 더 사실적인 스타일을 만들어냈지만, 테스트가 충분하지 않아 단순한 우연일 수 있습니다.

VAE:

저는 Waifu Diffusion의 kl-f8-anime2 VAE를 가장 좋아했기 때문에, 베이크드 VAE 버전에 이를 포함시켰습니다. 일반적인 vae-ft-mse-840000-ema-pruned VAE도 매우 좋습니다. orangemix VAE는 저에게 더 무미건조한 색상을 만들었기 때문에, 사실적인 톤의 더 어두운 색상이 필요할 경우에만 사용하는 것을 권장합니다.

업스케일링:

모든 이미지를 txt2img 중에 Hires. fix 설정을 사용하여 2배 업스케일링했습니다.

저는 4x-UltraSharp 업스케일러(다른 업스케일러와 함께 제공됨)를 좋아하지만, R-ESRGAN-4x+, 그리고 잠재 공간 기반 업스케일러도 매우 좋습니다. 이는 개인의 취향에 따라 달라집니다.

노이즈 제거 강도를 대략 0.5~0.6로 설정했지만, 사용하는 업스케일러와 업스케일링 정도에 따라 더 높거나 낮게 조정할 수 있습니다. 또한 img2img에서 SD 업스케일 스크립트를 사용한다면, 노이즈 제거 강도를 약 0.2~0.3으로 낮추는 것이 좋습니다.

변경 사항

2023년 6월 16일

• AOM3와 NED의 최신 버전을 사용할 수 있도록 v2 모델 추가. 개선 사항과 차이점은 버전 설명 참고.

2023년 3월 11일:

• 병합 크기 문제를 수정하기 위해 v1.1 모델 추가