Myne Factory - Base
세부 정보
파일 다운로드
모델 설명
마인 팩토리 베이스 모델
우리 모델의 기반
기술 세부 사항
모델 훈련
MyneFactoryBase는 Yande.re에서 약 18,000개의 높은 점수를 받은 샘플과 Konachan에서 약 5,000개의 높은 점수를 받은 샘플을 사용하여 훈련되었습니다. 파일 캡션은 WD1.4 태거를 3회 반복하여 훈련 데이터 내의 객체를 최대한 정확하게 식별할 수 있도록 생성했습니다. 이후, 더 짧은 캡션을 얻기 위해 임계값을 낮춘 단일 태거를 사용하여 두 번째 캡션 생성 작업을 수행했습니다. 최대 학습률을 수동으로 설정하고 코사인 감쇠를 사용한 Adam 최적화 알고리즘을 사용했습니다. 훈련은 배치 크기가 4인 RTX 4090에서 진행되었으며, DDIM 샘플러 스케줄러와 DDPM 노이즈 스케줄러를 혼합 정밀도로 활용했습니다.
텍스트 인코더 훈련
텍스트 인코더는 훈련 기간의 50% 동안 훈련되었으며, 10에폭마다 플립(고정 및 해제)을 반복했습니다. 최종 20에폭 동안의 미세 조정에서는 TE를 고정했습니다.
블록 병합
에폭 20 점에서 BasilMix를 사용한 블록 병합을 수행했습니다. 하지만 병합된 가중치가 빠르게 훈련 과정에서 사라지고, 훈련이 끝날 무렵에 이미 원래 훈련 데이터에 완전히 복귀해 있음을 알 수 있었습니다. 결국 최종 출시 제품에서는 블록 병합을 사용하지 않기로 결정했습니다.
훈련 과정 및 모델 아키텍처에 대한 자세한 기술 정보는 이 문서를 참고하세요.
작가: 金Goldkoron, tsmkirby, Juusoz
질문이 있으면 우리의 Discord 커뮤니티를 방문하세요.
프롬프트 형식
프롬프트에 부루스타일 태그를 사용하는 것이 좋습니다.
예시: woman, decorated horns, long robes, fog, long curly hair, freckles, solo, masterpiece, reflective, depth of field, caustics, detailed night, forest, leaves, moonlight, eyes, orange hair, green eyes, vines
예시: 1girl, solo, skirt, book, glasses, long hair, looking at viewer, bookshelf, jacket, plaid skirt, school uniform, long sleeves, parted lips, semi-rimless eyewear, bangs, blush, holding, blazer, indoors, sweater, under-rim eyewear, red-framed eyewear, holding book, brown eyes, library, sitting
태그는 데이터셋용으로 WD14 태거를 사용해 생성되었습니다.
또한, 더 짧은 프롬프트를 더 잘 처리할 수 있도록 미세 조정되었습니다.
추천 설정
다음 설정에서 이 모델은 최상의 성능을 보입니다:
이미지 크기
넓은 16:9 비율: 1024x576, 사각형: 768x768, 세로형: 640x1024
추천 해상도를 초과한 해상도로 실험해 보는 것도 자유롭게 가능합니다. Juusoz는 모든 예시를 추천해준 해상도보다 높은 해상도로 제작했습니다.
VAE
샘플러
DPM++ SDE Karras (선호)
2S Karras
Karras 샘플러는 더 역동적이고 흥미로운 생성물을 만들어냅니다.
Euler A
결과물이 더 매끄럽고 에어브러시처럼 보입니다.
스텝 수
최소 30, +70까지 늘리면 좋은 결과를 얻을 수 있습니다.
CLIP 건너뛰기:
CLIP 1
CLIP 2와 4는 실험용으로 사용 가능하며, 더 다양한 결과를 얻기 위해 시도해 보시는 것을 추천합니다.
CFG 스케일
9-12
필수는 아니지만, 다음 태그는 이미지 품질을 향상시킵니다:
프롬프트:
best quality, masterpiece네거티브 프롬프트:
lowres, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, jpeg artifacts, signature, watermark, username, blurry