==========================================

프롬프트 제안

영화 스틸 생성

긍정적 프롬프트:

upperbody/fullbody 사실적인 사진 of

부정적 프롬프트:

애니메이션, 만화, 그래픽, 텍스트, 그림, 크레용, 연필, 추상, 글리치, 비정상적, 변형, 추한, 변형됨, 노이즈 배경, 최저 품질, 최악의 해부학, 왜곡, 저품질

cfg: 4

sampler: dpm++ 3m sde

steps: 30

텍스트 생성

긍정적 프롬프트:

흐릿한 전경에 텍스트 "{text}" {주요 피사체}

부정적 프롬프트:

최저 품질, 최악의 해부학, 왜곡, 저품질

cfg: 4

sampler: dpm++ 3m sde

steps: 30

==========================================

20240515 버전 3.0

영화 스틸 이미지로 학습되었으며, 미학적으로 선정된 이미지를 수동으로 선별했습니다.

“중국인”, “전통 의상” 등 개선

이 버전은 제가 원하는 그림자와 조명 효과를 마침내 달성했습니다.

따라서 버전이 3.0으로 점프했습니다.

이 학습으로 인해 일부 기능이 약화되었습니다:

텍스트 생성 능력

손

눈

향후 버전에서 위 문제를 수정할 예정입니다.

20240510 버전 2.6

이 버전은 2단계 워크플로우(PIXART-SIGMA2OPENXL2.5)로 생성된 이미지로 학습되었습니다.

주로 그림자와 조명 개선

이전과 동일한 수준의 텍스트 생성 유지

버전 2.5 학습으로 인해 발생한 “봉인된” 서Standing 자세 수정

20240504 버전 2.5

스타일리시 태그로 창의적 사진이 추가되었습니다.

향후 버전에서는 이 태그를 계속 개선할 예정입니다.

20240502 버전 2.4b

텍스트 정확도가 약간 개선되었습니다. 대부분의 경우 2.4a보다 향상되지만, 일부 경우 2.4a가 여전히 2.4b보다 나은 결과를 보입니다.

사실적인 생성을 조정했습니다.

텍스트 생성을 위해 2.4a의 제안을 읽어 주세요.

2.4c는 2.4b 위에 DPO를 적용한 버전일 수 있습니다.

20240428 버전 2.4a

텍스트 생성에 집중, 텍스트 생성을 위한 제안 프롬프트:

긍정적 프롬프트:

흐릿한 전경에 텍스트 "{text}" {주요 피사체}

부정적 프롬프트:

최저 품질, 최악의 해부학, 왜곡

cfg: 3.5

sampler: dpm++ 3m sde

Align Your Steps 사용: 10

Align Your Steps 미사용: 30

참고: 버전 2.4a는 OpenXL2.4의 알파 버전입니다. 2.4 기반으로 여러 버전이 추가로 개발될 예정입니다.

20240425 버전 2.3e

그림자와 조명 개선

얼굴 세부 사항 개선

20240423 버전 2.3c

CLIP을 2.2 버전으로 복원(더 나은 성능을 발휘함)

20240422 버전 2.3

버전 2.2에서 생성된 PAG 이미지로 학습

구조, 해부학, 피부색 등 개선

텍스트 생성에 약간 영향을 줄 수 있음

20240417 버전 2.2

주로 손가락 개선

그림자 약간 개선

20240415 버전 2.1

피부 및 그림자 조정

해부학 약간 개선

20240412 버전 2.0

SDXL 기본 모델에서 완전히 재학습, 다중 라운드 학습

데이터셋:

몇 개의 애니메이션 이미지, 패션 이미지, 필터링된 PickScore 데이터셋, 4K 비디오 캡처, 코스프레 사진, NVIDIA InTheWild 데이터셋 등

트리거 단어:

애니메이션 아트워크, 패션 사진, 코스프레 사진, 라우 사진, 코튼 돌, 여성, 남성 등

사실적인 이미지를 얻으려면 “raw photo”를 프롬프트 시작에 사용하고, unity, cg 등은 사용하지 마세요.

귀여운 이미지를 생성하려면 “cotton doll”을 추가하여 코튼 돌 형태를 유도해 보세요.

여성을 생성하려면 “1girl” 대신 “woman”을 사용하세요. “1girl”을 사용하면 일반적으로 어린 소녀가 생성됩니다.

병합 목록:

sdxl dpo lora

openxlv1.4

--kohaku alpha 및 beta

Animagine v3 및 Pony Diffusion은 병합하지 않음

주의: 중국 여성, 중국 전통 의상, 중국 인종 관련 요소는 SDXL의 중국 편향을 악화시킬 수 있습니다. 향후 버전에서 개선될 예정이지만, 현재는 사실적인 이미지를 생성할 때 이 태그를 사용하지 마세요.

20240323 버전 2.0 베타

20231229 버전 1.4 인간 선호도 개선

2024년 버전 이전 최종 버전 1.4입니다.

Pickapicv2 데이터셋에서 필터링된 4,000개의 데이터로 학습되었습니다.

미학, 사실성, 안구, 그림자와 조명, 구성 등을 개선하는 것을 목표로 합니다.

기존 버전 대비 전반적인 개선을 달성했습니다.

터보 버전을 사용하고 싶다면, 병합된 LoRA나 모델보다 더 효율적인 Turbo LoRA 또는 LCM LoRA를 사용하는 것을 권장합니다.

댓글이나 이미지 공유에 감사드립니다. 감사합니다.

20231201 버전 1.3 터보 병합 및 여성 얼굴 조정

SDXL 터보와 병합하여 10스탭으로 빠른 생성이 가능한 고품질 출력을 제공합니다.

그림자, 입술, 외곽선 등 여성 얼굴 세부 사항 조정

OpenXL v1.3 터보 권장 생성 설정:

스탭: 10

CFG: 1~5 (권장 2)

샘플러: dpmpp_3m_sde

스케줄러: sgm_uniform

풀 버전 출력은 터보 버전과 약간 다릅니다.

빠른 생성에는 터보 버전을, 품질에는 풀 버전을 사용하는 것이 권장됩니다.

20231128 버전 1.2 사실적 그림자 및 눈 생성 개선 버전

사실적인 그림자를 주로 조정하고, 사실적인 눈 생성을 개선했습니다. 애니메이션 모델 혼합의 영향을 줄였습니다.

20231127 버전 1.1 손 및 애니메이션 개선 버전

버전 1.1은 애니메이션 모델과 병합한 첫 번째 버전으로, 애니메이션 스타일을 개선하는 것이 목표입니다.

모든 병합 체크포인트는 설명 마지막에 추가되었습니다.

애니메이션 모델 외에도 손 생성이 큰 개선점입니다.

LLM을 사용한 캡셔닝을 적용한 몇 개의 손 데이터셋으로 학습했습니다.

다양한 체크포인트를 신중하게 미세 조정 및 테스트하고,

최근 논문의 LECO 기술을 사용한 LoRA와 병합했습니다.

테스트 결과:

손을 흔드는 테스트 100회 중 70%에서 정확히 5개의 손가락 생성

테스트 프롬프트:

긍정:

좋은 손, 아름다운 여성이 남자친구에게 손을 흔드는 사진

부정:

풀로 그린 손, 미완성 그림 손, 스케치, 추상, 애니메이션

로드맵:

완료:

• 손 생성 v1.1

• 애니메이션 스타일 v1.1

• 사실적 그림자 v1.2

• 눈 생성 v1.2

• SDXL 터보 병합 v1.3

• 여성 얼굴 조정 v1.3

향후 개발:

• 얼굴

• 자세

• 표정

• 연령대

• 특정 애니메이션 캐릭터

• 코스프레 의상

• 아트스타일

============================================================

학습 방법:

최신 업데이트는 다음 다양한 학습 방법을 사용했습니다:

• Meta Emu의 품질 학습

• OpenAI Dalle3의 설명적 캡션

• 직접 미세 조정

• 등

학습 데이터셋에는 Nijijourney의 이미지가 포함되지 않았습니다. 저는 Niji 스타일을 별로 좋아하지 않습니다.

이 체크포인트는 다양한 스타일을 제공할 수 있는 SDXL의 개선 버전을 목표로 합니다.

사용자 지침:

가로세로 비율:

SDXL 표준 가로세로 비율을 사용하세요. 512512, 512768 같은 SD1.5의 가로세로 비율은 사용하지 마세요.

프롬프트 스타일:

[스타일 단어] [내용 설명] [보조 단어]

특정 스타일로 이미지를 생성하려면 위 형식을 사용하는 것이 좋습니다.

SDXL은 다양한 스타일을 생성할 수 있으므로, 주제 앞에 스타일을 명시하여 이미지 스타일을 제어해야 합니다.

스타일 생성이 부족할 경우, 원하지 않는 스타일을 부정 프롬프트에 명시하세요.

예시:

긍정:

사실적인 세계에서 애니메이션 피카츄가 농구를 하는 사진, 책상 위에 닫힌 노트북, 상세한 배경

부정:

하얀 배경, 3D 렌더링

SD1.5에서 사용하는 방대한 부정 프롬프트 조합은 권장하지 않습니다.

부정 프롬프트를 사용하거나 사용하지 않고 차이를 확인해 보세요.

클래스리프 가이던스(CFG):

2.5~5.5의 CFG를 권장합니다.

샘플러:

3m sde GPU를 권장합니다.

스케줄러:

Karras를 권장합니다.

스탭:

25~40

다양한 프롬프트로 시도해 보세요. 만족한다면 이미지🖼️와 피드백📓을 공유해 주세요.

감사합니다❤️.

문의 방법:

[email protected]

WeChat:

fkdeai

============================================================

병합 목록:

20231127 버전 1.1

Kohaku-XL beta 6.9

/model/162577?modelVersionId=203416

Kohaku-XL alpha nyan

/model/136389/kohaku-xl-alpha

SDXL Cross Style Hand Fixing Lora

/model/211577/sdxl-cross-style-hand-fixing-lora?modelVersionId=238349