Embroidered Quilting TI XL
세부 정보
파일 다운로드
이 버전에 대해
모델 설명
2024년 7월 3일
TI(Textual Inversion) 임베딩(프롬프트에서 8개의 토큰 사용)은 자수로 만든 퀼트 이미지를 생성합니다. SDXL은 퀼트, 자수, 봉제 및 직물 예술과 관련된 이미지를 학습 세트에 어느 정도 포함하고 있었지만, 일관된 표현으로 새로운 이미지를 생성하는 데 어려움을 겪었습니다. 따라서 기존 콘텐츠를 더 일관된 방식으로 활용하기 위해 TI를 만들어보기로 했습니다. 이는 기본 SDXL 및 기본에서 너무 벗어나지 않은 체크포인트에서 작동합니다.
초기 버전은 기본 SDXL v1.0으로 학습되었습니다.
트리거 단어는 cs-qu1lt-1입니다(“i” 대신 “1” 사용). 그러나 .safetensors 파일 이름을 바꾸기만 하면 쉽게 변경할 수 있습니다. 변경할 때 SDXL이 이미 알고 있는 실제 단어는 사용하지 마세요!
주의할 사항:
* TI는 학습 이미지에 그런 테두리가 없음에도 일반적으로 이미지 주변에(직물) 테두리를 생성합니다. 이는 실제 퀼트 예술의 특징이며, SDXL이 원래 학습한 이미지와 관련이 있습니다.
* 단순한 프롬프트는 주로 퀼팅과 일부 자수를 생성하고, 복잡한 프롬프트는 더 많은 바느질/자수를 생성합니다.
* 장면의 나머지 부분이 퀼트되어 있어도 사람(얼굴/손/노출된 피부)은 사진처럼 보일 수 있습니다. 이는 SDXL이 매우 많은 사진처럼 보이는 이미지로 학습되었기 때문일 것입니다.
* 때로는 TI가 평평한 퀼트 이미지가 아니라 퀼트된 요소와 비퀼트된 요소가 섞인 3D 장면을 생성합니다.
* 대상 기술의 특성상, 사진처럼 사실적인 표현을 유도하는 프롬프트보다 이미지가 단순화됩니다.
TI 트리거만으로 프롬프트를 입력하면 무작위 퀼트/자수 풍경을 얻을 수 있습니다. 일부는 장면이고, 일부는 패턴처럼 보일 것입니다. 더 구체적인 프롬프트를 위해 다음 형식이 일반적으로 효과적이었습니다:
TI 트리거, 장면 설명, 보조 설명
예시:
cs-qu1lt-1, 배경에 언덕이 있는 여름 들판, 햇빛, 부푼 구름
cs-qu1lt-1, 빅토리아 시대의 거실, 벽난로, 거울, 크리스마스
cs-qu1lt-1, 호수 위의 요트, 멀리 보이는 산, 폭풍우 하늘
프롬프트에서 TI 토큰을 오른쪽으로 이동시키거나 가중치를 줄이면 퀼트된 장면에서 직물/재봉된 요소가 포함된 장면으로 전환됩니다. 일부는 정말 흥미로웠고, 테스트 중에 집중력이 흐트러졌습니다 :-)
테스트 및 데모 이미지는 Forge 버전: f0.0.17v1.8.0rc-latest-276-g29be1da7에서 생성되었습니다.
데모 이미지는 단순한 프롬프트 10개, 복잡한 프롬프트 10개에서 생성되었습니다.
샘플러: 테스트에 다음이 잘 작동했습니다...
DPM++ 2M Karras 25<--->50 단계, 일반적으로 테스트 시 30 또는 40 단계 사용
CFG 스케일: 5<--->10, 일반적으로 테스트 시 6 또는 7 사용
세부 사항을 약간 향상시키기 위해 대부분 Hires.fix를 1.25 또는 1.5로 사용했습니다.
Hires.fix 단계: 15<--->25, 4x_NMKD_Siax_200k 또는 선호하는 모델, 노이즈 제거: 0.4
데모 이미지에는 다른 조정기/ControlNet/i2i/후처리를 사용하지 않았습니다.
테스트 중에는 부정적 프롬프트를 가능한 한 단순하게 유지했습니다. 예:
闭 눈, 서명, 로고
이 TI와 잘 작동한 체크포인트 모델:
Magie_Noire v4
/model/505656?modelVersionId=612138
Crystal Clear XL
/model/122822/crystal-clear-xl
Clarity XL
ZavyChromaXL v8
/model/119229?modelVersionId=563988
일부 체크포인트는 추가 TI 또는 LoRA 없이도 직물 제작 관련 용어에 잘 반응합니다. 좋은 예시는 @Marielle의 Magie_Noire 시리즈입니다:
이 TI를 사용하지 않고 Magie_Noire ver3에서 일부 예시를 만들었습니다:
https://civitai.com/posts/4011537
[PUBLISHEDTOCIVITAIONLY]