Dream Dis Pix XL

드림웍스, 디즈니, 픽사의 이미지로 구성된 혼합 스타일 데이터셋을 사용하여 SDXL LoRA 모델을 훈련시킨 (약간 실패한) 시도입니다. 이 Blip2-Captioned 데이터셋을 Huggingface에 업로드했습니다.

보통 저는 LoRA 랭크 4-16을 선호하는데, 지금까지 항상 충분했고 비교적 작은 체크포인트를 제공했기 때문입니다. 그러나 이 경우, 랭크 32로 설정하기 시작해야 비로소 결과를 얻을 수 있었고, 24도 시도해보았지만 충분하지 않았습니다.

제 결론은, 각각의 특정 시각적 하위 스타일에 맞춰 여러 개의 낮은 랭크 LoRA로 별도로 훈련했더라면 더 나은 결과가 나왔을 것이라는 점입니다.