SB-MIX

SB-MIX는 간단한 프롬프트만으로 좋은 결과를 내는 모델이 아닙니다! v0 버전은 NAI 모델과 유사한 성능을 보이며, 적절한 프롬프트 조합이 필요로 해서야 그 장점을 발휘할 수 있습니다. v1 버전은 더욱 깊이 있는 레이어 병합을 통해 완전한 스타일화를 이루었으며, 프롬프트에 대한 요구 수준이 v0보다 낮습니다.

Т위스토 플랫폼에서 새로운 LoRA를 공개했습니다: https://tusi.art/models/605521961319198991

제작 프로세스

이 모델은 먼저 e9 기반으로 DB 트레이닝을 통해 두 가지 다른 베이스 모델을 얻은 후, tmnd 모델과의 세 모델 병합을 수행했습니다. 이후 unet의 in 레이어, midd 레이어, base 레이어를 모두 e9의 내용으로 재설정함으로써 기초 버전인 SB-MIX-v0을 완성했습니다. 이 버전은 태그 준수성에서 매우 뛰어난 성능을 보이며, 단점은 스타일화가 다소 미흡하다는 점입니다.

다음으로, SB-MIX-v0의 unet out 레이어에 포함된 DB 베이스 모델 중 하나를 새로운 DB 베이스 모델로 교체하고, DarkSushi 모델의 unet in 레이어를 이 모델에 적용하여 현재의 SB-MIX-v1 버전을 완성했습니다. 이 조작은 v1 모델의 태그 준수성은 다소 약화시켰지만, 추정으로는 e9의 약 70~80% 수준으로, 어느 정도 수용 가능한 범위입니다. 그러나 모델 자체의 스타일화 능력은 심각하게 향상되었으며, 이는 의미 있는 개선이라고 생각합니다.

향후 개선 방향

앞으로는 unet의 in 레이어에 대해 추가적인 작업을 고려할 계획입니다. 기존의 in 레이어는 특정 모델의 내용물만을 전반적으로 사용하는 방식으로, 다소 단순하다고 판단되기 때문에, 제거하거나 개선할 여지가 충분하다고 봅니다. 이를 통해 태그 준수성 측면의 개선이 가능할 것입니다. 반면 midd 레이어와 base 레이어는 현재로서는 손대지 않으려 합니다. 이 두 레이어는 불확실한 영향 요소가 많고, 그 영향 범위를 충분히 파악하지 못했기 때문입니다.

감사의 말씀

bilibili의 유튜버 秋葉aaaki 그리고 QQ 채널 '秋葉의 티파이 가게'에 감사드립니다. 이들과의 만남을 통해 SD-webui에 접근하게 되었고, 많은 관련 지식을 학습할 수 있었습니다.

###_DECLARATION

물론 이 모델에 관심을 가질 사용자는 많지 않을 것이지만, 그래도 이곳에 보호장치를 추가해 두어야 할 것 같습니다:

어떠한 상업적 사용도 금지됩니다. 단, 이에 한해 예외가 없으며 다음과 같은 행동은 금지됩니다: 패키지 판매, 유료 또는 접근 제한이 존재하는 플랫폼에 재게시, 처리한 후 판매, 이 모델로 생성된 이미지 판매 등. 모델 자체는 무료이며 자유롭게 사용하거나 병합할 수 있으며, 다른 플랫폼에 재게시 가능하나 반드시 출처를 표기하고 링크를 첨부해야 합니다.

특정 주민등록부에 한장만 있는 연단각은 재게시 금지.