Experience SDXL

설명 읽기

Experience의 SDXL용 BETA 버전.

"이제 16배 더 큰 엉덩이 공간과 함께" - 토드 하워드

중요 참고사항: ExperienceXL_v2_BETA를 사용할 때는 fp16 버전을 사용하는 것을 권장합니다. 전체 모델은 샘플 이미지의 모델 해시와 일치시키기 위해 업로드된 것뿐입니다.

질문/피드백/업데이트

Unstable Diffusion Discord의 내 스레드 방문하기

커피 한 잔 사주세요 ❤

https://ko-fi.com/ndimensional

모든 기부는 새로운 Stable Diffusion 미세 조정 및 오픈소스 AI 도구 개발에 사용됩니다.

개요

이것은 SDXL용 Experience의 완전한 출시 버전이 아닙니다. 전체 모델은 아직 학습 중이며, 5월 중 완료될 예정입니다.

BETA 버전은 미세 조정의 최신 에포크 중 하나로, 초기 에포크에서 부족한 부분을 채우기 위해 애니메이션 모델과 약간 혼합되었습니다.

Experience SDXL (BETA)와 Experience SD1.5의 차이점

사진처럼 사실적이지 않음: 이는 두 아키텍처 간의 핵심 차이점이며, 완전한 버전이 아직 멀어 보이는 이유입니다. SDXL(BETA) 버전은 SD1.5용 Experience의 초기 출시 버전과 더 유사합니다. '사진 같은 사실성'은 실제 사진이나 영화 촬영보다 실시간 렌더링에 가깝습니다. SDXL(BETA) 모델로는 피부 디테일과 텍스처를 동일한 수준으로 얻기 어렵습니다. 완전한 SDXL 모델은 사진 및 영화 촬영 수준을 구현할 수 있습니다.
업데이트: Main 및 이후 버전은 사진 같은 사실성을 구현할 수 있습니다.
적은 것이 더 많음: SDXL(BETA) 버전에서는 모델에 프롬프트를 줄 때 장문을 쓸 필요가 없습니다. 단순한 형용사를 토큰 수정에 사용해 보세요. 예: '경이로운 풍경', '다른 세계의 거대한 구조물'
선호하는 프롬프트 스타일 사용: SDXL의 큰 장점 중 하나는 강력한 텍스트 인코더로 자연어 프롬프팅이 가능하다는 점입니다. 기본 모델의 모든 캡션은 제 MLLM 캡셔닝 시스템(자세한 내용은 Discord 스레드 참조)을 통해 자연어 형식으로 생성되었습니다. 그러나 SD1.5 및 Booru 태그의 쉼표 구분 키워드 방식을 사용할 수도 있습니다. 또는 원하는 이미지를 사람에게 설명하듯 간단히 서술해도 됩니다.
프롬프트 준수: SDXL(BETA) 버전은 프롬프트와 더 가까운 결과를 출력할 확률이 높습니다.
스타일 및 미디어: 위에서 언급한 사진 및 영화 촬영 문제를 제외하고, SDXL(BETA) 버전은 SD1.5 버전보다 더 다양한 스타일과 미디어로 이미지를 생성할 수 있습니다. 가장 좋은 방법은 프롬프트 시작 부분에 미디어 또는 스타일을 명시하는 것입니다. 미디어와 스타일 토큰을 모두 사용할 경우, 프롬프트 시작부에 미디어를, 끝부분에 스타일 토큰을 배치하세요.
더 높은 해상도: SDXL의 특성상 자연스럽게 더 높은 해상도를 제공합니다.

사용 방법

참고: VAE 필요. 여기에서 찾으세요. 또는 이 페이지에서 다운로드하세요.

VAE 경로 (Automatic1111-Webui):

Config 경로 (Automatic1111-Webui):

업데이트: Main 버전 이상에서는 더 이상 필요하지 않습니다.

권장 생성 파라미터

[Sampler|Steps|CFG]

Euler a | Steps: 30 | CFG: 7
DPM++ 2M SDE Karras | Steps: 30+ | CFG: 7 - 8

Hires Fix

테스트되지 않음: 저는 인퍼런스 중 몇 번의 우연한 사용을 제외하고 Hires Fix를 사용하지 않았습니다.

확장 기능

ADetailer: GitHub에서 자세히 보기

이것들은 제 권장사항일 뿐이며, 본인의 선호값을 사용하거나 새로운 값을 실험해 보세요.

변경 로그

2024/4/27 Experience_v4 (Main):

사진 같은 사실성 개선.
- 프롬프트 팁: 생성하려는 미디어를 프롬프트의 처음 5개 토큰 안에 포함하세요.
사용자 정의 config가 더 이상 필요하지 않습니다.
봄 정리 🧹
- 최신 모델 버전을 "Main"으로 라벨링하여 Civitai가 파일명을 변경한 후에도 가독성을 높였습니다. 최신 버전은 항상 "Main"으로 명명됩니다.
- 모델 페이지 제목에서 "BETA" 삭제.
  - 참고: 모델은 여전히 학습 중이며, 최종 버전이 아닙니다.
- 할 일:
  - 모델 버전에 대한 간단한 설명 추가.
  - 메인 페이지를 최신 버전 상태에 맞게 업데이트.

————————————————————————————————————————

2024/4/22 Experience_v2_BETA:

사진 같은 사실성에 사소하고 매우 사소한 개선.
- 이 모델은 여전히 사진처럼 사실적이지 않습니다.
- 프롬프트 시작부에 Cinematic Still Frame을 추가하고, 끝부분에는 영화/사진 관련 태그와 자연어를 사용.
텍스트 인코더에 대한 조정으로 큰 변화는 없음. 곧 더 많은 정보 제공.
모델의 프롬프트 편향 개선 시도.
- 예: 3D 렌더링 프롬프트에 booru 태그를 사용했을 때 booru_style_prompting 때문에 애니메이션 스타일이 과도하게 선호되던 문제 완화.
- 여전히 완벽하지 않으며, 텍스트 인코더의 아키텍처와 최종 출력에 미치는 영향에 대한 추가 연구 필요.
프롬프트 준수성 개선(모델 출력이 프롬프트와 얼마나 일치하는지).
전반적인 품질 향상.