Imai Midori (Shirobako)

• 이 모델은 두 개의 파일을 가지고 있습니다. 두 파일을 함께 사용해야 합니다!!!
• 관련 트리거 단어는 참고용이며, 때때로 조정이 필요할 수 있습니다.
• 임베딩 모델의 권장 가중치는 1이며, 이는 더 높은 정확도를 제공합니다. 더 높은 일반화가 필요하다면 0.5로 낮출 수 있습니다.
• LoRA 모델의 권장 가중치는 0.85입니다. 오염의 징후가 있다면 0.5로 낮추는 것을 고려하세요.
• 프리뷰 이미지는 몇 개의 고정된 테스트 프롬프트와 클러스터링 데이터셋 특징에서 파생된 여러 프롬프트를 사용하여 생성되었습니다. 랜덤 시드가 사용되었으며, 선택적 편향은 배제되었습니다. 보이는 그대로 나옵니다.
• 의상에 대한 특별한 학습은 수행되지 않았습니다. 제공된 프리뷰 포스트를 확인하여 의상에 해당하는 프롬프트를 확인하세요.

이 모델 사용법

이 모델은 두 개의 파일을 가지고 있습니다. 두 파일을 함께 사용해야 합니다!!!. 이 경우, imai_midori_shirobako.pt와 imai_midori_shirobako.safetensors 두 파일을 모두 다운로드한 후, imai_midori_shirobako.pt를 텍스처 반전 임베딩으로, imai_midori_shirobako.safetensors를 LoRA로 동시에 사용하세요.

このモデルには2つのファイルがあります。一緒に使う必要があります！！！。 この場合、imai_midori_shirobako.ptとimai_midori_shirobako.safetensorsの両方をダウンロード する必要があります。imai_midori_shirobako.ptをテクスチャ反転埋め込みとして使用し、同時にimai_midori_shirobako.safetensorsをLoRAとして使用してください。

这个模型有两个文件。你需要同时使用它们！！！。 在这种情况下，您需要下载imai_midori_shirobako.pt和imai_midori_shirobako.safetensors这两个文件，然后将imai_midori_shirobako.pt用作纹理反转嵌入， 同时使用imai_midori_shirobako.safetensors作为LoRA。

이 모델은 두 개의 파일이 있습니다. 두 파일을 함께 사용해야 합니다!!!. 이 경우에는 imai_midori_shirobako.pt와 imai_midori_shirobako.safetensors 두 파일을 모두 다운로드하신 다음에 imai_midori_shirobako.pt을 텍스처 반전 임베딩으로 사용하고, 동시에 imai_midori_shirobako.safetensors을 LoRA로 사용하셔야 합니다.

트리거 단어는 imai_midori_shirobako이며, 권장 태그는 best quality, masterpiece, highres, solo, {imai_midori_shirobako:1.15}, long_hair, blue_hair, side_ponytail입니다.

이 모델의 학습 방식

이 모델은 HCP-Diffusion을 사용하여 학습되었습니다. 자동 학습 프레임워크는 DeepGHS Team에서 유지보수합니다.

일부 프리뷰 이미지가 Imai Midori Shirobako처럼 보이지 않는 이유

프리뷰 이미지에 사용된 모든 프롬프트 텍스트(이미지를 클릭하면 볼 수 있음)는 학습 데이터셋에서 추출된 특징 정보를 기반으로 클러스터링 알고리즘을 통해 자동으로 생성되었습니다. 이미지 생성 시 사용된 시드도 랜덤으로 생성되었으며, 이미지에는 어떤 선택이나 수정도 가해지지 않았습니다. 따라서 이러한 문제점이 발생할 수 있습니다.

실제로 우리 내부 테스트 결과에 따르면, 이러한 문제를 겪는 대부분의 모델이 프리뷰 이미지보다 실제 사용 시 더 나은 성능을 발휘합니다. 당신이 해야 할 유일한 작업은 사용 중인 태그를 조정하는 것입니다.

이 모델이 과적합 또는 과소적합 같아 보이는데, 어떻게 해야 할까요?

우리의 모델은 huggingface 저장소 - CyberHarem/imai_midori_shirobako에 공개되어 있으며, 모든 학습 단계의 모델이 저장되어 있습니다. 또한 학습 데이터셋은 huggingface 데이터셋 - CyberHarem/imai_midori_shirobako에 공개되어 있어 도움이 될 수 있습니다.

왜 더 잘 선별된 이미지만 사용하지 않나요?

이 모델의 전체 과정—데이터 수집, 학습, 프리뷰 이미지 생성 및 게시—는 인간의 개입 없이 100% 자동화되었습니다. 이는 우리 팀이 수행한 흥미로운 실험이며, 이를 위해 데이터 필터링, 자동 학습, 자동 게시를 포함한 완전한 소프트웨어 인프라를 구축했습니다. 따라서 가능하다면, 여러분의 피드백이나 제안을 더 많이 받고 싶습니다. 이는 우리에게 매우 소중한 자료입니다.

원하는 캐릭터 의상을 정확히 생성할 수 없는 이유

현재 학습 데이터는 다양한 이미지 웹사이트에서 수집되었으며, 완전히 자동화된 파이프라인에서는 캐릭터가 어떻게 공식 이미지를 보유하는지 정확히 예측하기 어렵습니다. 따라서 의상 생성은 학습 데이터셋의 라벨을 기반으로 클러스터링을 통해 가능한 한 최선의 재현을 시도합니다. 우리는 이 문제를 계속 해결하고 최적화를 시도할 예정이지만, 완전히 해결할 수 없는 과제입니다. 의상 재현의 정확도는 수작업으로 학습된 모델의 수준과 같아지기 어렵습니다.

사실, 이 모델의 가장 큰 장점은 캐릭터 본연의 특징을 재현하고, 더 큰 데이터셋 덕분에 비교적 뛰어난 일반화 능력을 갖추고 있다는 점입니다. 따라서 이 모델은 의상 변경, 캐릭터 포즈 조정, 그리고 물론 캐릭터의 NSFW 이미지 생성과 같은 작업에 적합합니다!😉

다음과 같은 그룹은 이 모델을 사용하지 않는 것이 좋으며, 이에 대해 사과드립니다:

1. 가장 사소한 차이더라도 캐릭터 원본 디자인에서 벗어나는 것을 용인할 수 없는 분들.
2. 캐릭터 의상 재현의 정확도에 높은 요구 사항을 가진 사용 시나리오를 대상으로 하는 분들.
3. Stable Diffusion 알고리즘 기반의 AI 생성 이미지에서 발생할 수 있는 임의성을 수용할 수 없는 분들.
4. LoRA를 사용한 캐릭터 모델 학습의 완전 자동화 과정에 불편함을 느끼거나, 캐릭터를 존중하기 위해 수동 작업만이 학습 방법이어야 한다고 생각하는 분들.
5. 생성된 이미지 콘텐츠가 자신의 가치관에 반한다는 느낌을 받는 분들.