Zonkey - Realism

Zonkey V7 - 본인 책임 하에 다운로드 하세요.

기반 Pony에 1.0MP 버킷 대신 1.5MP 버킷으로 새로운 슬라이더를 학습시켜 Zonkey 6에 적용했습니다. 또한 NTC의 Not Simple Background LoRA도 적용했습니다.

모델은 낮은 CFG를 선호합니다.

초기 프롬프트에 점수 태그를 사용한 후, 그 태그를 제거한 프롬프트로 대부분의 스텝을 재시작하면, 약간의 디테일 선명도 감소를 감수하고도 멋진 결과를 얻을 수 있었습니다. 예시는 포함된 ComfyUI 워크플로우 이미지에서 확인하세요.

Zonkey V6.2 - 하이퍼 8스텝 에디션

ByteDance Hyper 8 Step LoRA와 NTC의 Not Simple Background LoRA를 도입하여 배경을 개선했습니다. 첫 번째 패스에는 Euler a를, CFG를 1.25-1.5로 설정하고, 업스케일링에는 DPM2++ SDE 또는 유사한 샘플러를 추천합니다. 업스케일링을 권장합니다. 2인물 장면의 경우 12스텝이 캐릭터 디테일을 정리하는 데 도움이 되지만, 1인물/시점 장면에는 일반적으로 8스탭으로 충분합니다.

Zonkey V6 - 구원의 날 에디션 - 이제 같은 얼굴은 50% 줄어들었습니다.

더게으르지 않기로 결정하고 V6로 몇 가지 학습을 진행했습니다. Zonkey v5에 Pony의 25%를 다시 주입했습니다. 이 모델로 400장의 사진(가까운 200장, 멀리 있는 200장)의 얼굴을 인페인팅하고, 결과 쌍을 사용하여 2개의 슬라이더 LoRA를 생성하여 Pony처럼 보이지 않도록 했습니다. 이 LoRA들은 서로 다른 레이어에 병합되었습니다.

Zonkey V5 - 수제 버전

Zonkey V3과 DARE의 모든 재료를 시작점으로 삼아, 각각 6%씩 무작위 순서로 50회 반복 병합했습니다. halcyonSDXL_v17을 12.5%, bemypony_real을 5% 추가했습니다. 원래 Pony CLIP으로 돌아가, v4보다 LoRA 학습에 더 적합합니다. 밝기를 다시 높여 보다 중립적인 스타일로 조정하고, 노이즈를 4.2에서 줄였습니다.

이 버전에서는 점수 태그를 사용하지 않는 것이 좋거나, 초기 몇 스텝에서만 사용하거나, 프롬프트 끝부분에 배치하는 것이 좋습니다. 점수 태그는 구성에 도움이 되지만 이미지를 애니메이션 스타일로 유도합니다. 1girl도 비슷한 효과를 주므로 필요하지 않다면 제외하세요. 이전 버전에서 사용했던 해시된 토큰 네거티브는 이제 문제를 일으키므로, 저도 더 이상 사용하지 않습니다.

Zonkey V4.2 - 작업을 다시 확인하세요 에디션

4.0의 과도한 노이즈는 CLIP DARE 병합 노드 중 하나의 잘못된 설정 때문이었습니다. 이를 수정하고 CLIP에 oneFORALLPonyFantasy_v20DPO를 약간 더 추가했습니다. 4.2는 명확도를 개선하고, 표준 스텝 수를 다시 사용할 수 있게 되었습니다. 모든 예시 이미지(첫 번째 제외)는 4.0 이미지와 동일한 생성 데이터를 사용했으며, 첫 번째 패스 및 Hi-Res Fix 모두 40-100스텝 대신 30스텝을 사용했습니다. 이 이미지들은 선별된 것이 아니며, 보통 제외했을 몇 가지 결함이 포함되어 있지만, 직접 비교를 보여주고 싶었습니다.

Zonkey V4 - 선제 대응 에디션

Godiva라는 모델을 만들 계획이었지만, 이름이 선점되었습니다. 어쨌든 이 모델은 이름과 상관없이 훌륭합니다. 포토리얼리즘을 위해 캐릭터 정확도는 거의 희생하지 않았습니다. 이제 CLIP이 수정되었습니다. 원래 Pony CLIP의 약 50%를 oneFORALLPonyFantasy_v20DPO의 CLIP로 교체하고, 추가로 25%를 proteusRundiffusionDPO_truereversecubich로 대체했습니다. UNET에는 proteusRundiffusionDPO_truereversecubich 약 40%, datassRev3Pony_rev3 약 10%, damnPonyxlRealistic_damnV20EXTREME 약 5%를 추가했습니다. V Gradient로 Zonkey V3과 병합하고, 아웃 레이어에 enjoyXLSuperRealistic_v30ModifiedVersion 약 25%를 넣었습니다.

이 모델은 창의성으로 가득 차 있습니다. 약간 노이즈가 많을 수 있으므로, Hi-Res Fix에는 DPM++ 대신 Euler a를 사용하세요. 노이즈와 창의성 사이에서 좋은 균형을 찾은 것 같습니다. 많은 스텝을 선호하므로 최소 30-40스텝을 권장하며, Hi-Res Fix도 함께 사용하시는 것이 좋습니다. 전반적으로 해부학적 정확도는 이전 버전보다 더 안정적이므로, 추가 스텝을 주면 낭비되는 생성이 줄어들 것입니다.

즐기고, 이상하게 만들어보세요. 무엇이든 이 모델로 만들어진 결과를 보는 걸 좋아합니다. 부끄러워하지 말고 자유롭게 공유해주세요.

Zonkey V3 - 맹렬한 수술 에디션

Zonkey V2는 CosXL의 Copax Timeless, Rundiffusion Proteus, Art Universe, Realistic Stock Photo, People Photography를 DARE로 병합하고, Jibmix, AnimeBoys, ToonSphere3D, Animagine를 DARE로 제거한 후, 이를 원래 PonyDiffusion V6 XL에 다시 DARE 병합했습니다.

V3은 이전 버전보다 더 유연하며, 높은 포토리얼리즘과 만화 스타일 모두를 달성할 수 있지만, 프롬프트로 유도해야 합니다. 점수 태그 없이 프롬프트 초기에 “real” 또는 “real life”라는 단어를 사용하면, 특히 가중치를 충분히 높이면 더 나은 얼굴로 높은 수준의 포토리얼리즘을 달성할 수 있습니다. 점수 태그는 전반적인 미학을 향상시키지만, 포토리얼리즘을 줄이고 얼굴을 애니메이션/만화 스타일로 만들 수 있습니다.

대비 및 색상 범위의 개선과 함께, Zonkey V3에는 효과를 강화하기 위해 Blessed VAE가 포함되어 있습니다.

Zonkey V2 - 큰 털이 많고 뚱뚱한 버전

Juggernaught X, SDXXXL, Bordello, Ratatoskr의 새로운 마스킹 DARE 주입. PonyDiffusionV6 XL에 대한 U-Net 재정규화.

개선된 포토리얼리즘
더 나은 조명
더 선명한 디테일
배경의 다양성 및 디테일 증가
더 생동감 있는 색상
더 적은 아티팩트
더 나은 해부학
더 높은 캐릭터 정확도
더 털이 많은 퓨리

Zonkey는 말 모델에 가능한 한 높은 수준의 포토리얼리즘을 도입하면서도 유연성과 프롬프팅 능력을 유지하려는 목표로 만들어졌습니다. 다른 포니 리얼리즘 모델처럼, 얼굴이 상대적으로 작을 때 눈에 문제가 발생할 수 있지만, Hi-Res Fix가 종종 이를 개선합니다.

게시된 모든 이미지는 DPM++ SDE Exponential, 30스텝, CFG 3.5-5.0, Hi-Res Fix Latent(양선형 보간), 1.5 또는 2x 배율로 생성되었습니다. Euler a와 DPM++ 2S a를 사용하면 더 나은 포즈를 얻기 쉬우나 디테일은 낮습니다. ADetailer는 사용하지 않았으나 일부 경우 도움이 될 수 있습니다. 제안된 프롬프트 스타일은 게시된 이미지를 참조하세요.

아래 체크포인트를 사용했습니다:

Animagine XL v3.1
Art Universe SDXL v2.0
Bordello v1.6
CinematicRedmond v1.0
ChacolRealPonyMixXL (Asian Version) v3.0a
Copax TimeLessXL v11
FULLY_REAL_XL v9.0
Juggernaut XL v8
Pony Diffusion V6 XL
Ratatoskr v3.8
Realistic Freedom Wonderland
RealVisXL v4.0
RunBull_XL v0.4
RsmPornXL v0.81
SDXXXL v3.0
Virile XL v1.0
yudas_woman v3
ZavyChromaXL v6.0

다음 LoRA도 사용했습니다:

BoringReality_faces v4
Porn Productivity(multi-concepts) PP-21 v1
RMSDXL Photo XL v1.0
SDXL Offset Example Lora v1.0
Styles for Pony Diffusion V6 XL Photo v2
The Handsomizer v1.0(Pony Diffusion V6)