fischl/フィッシュル/菲谢尔 (Genshin Impact)

• 이 모델은 두 개의 파일로 구성되어 있습니다. 두 파일을 함께 사용해야 합니다!!!
• 관련 트리거 단어는 참고용이며, 경우에 따라 조정이 필요할 수 있습니다.
• 임베딩 모델의 권장 가중치는 1이며, 이는更高的 품질을 제공합니다. 더 높은 일반화가 필요하다면 0.5로 낮출 수 있습니다.
• LoRA 모델의 권장 가중치는 0.85입니다. 오염의 증거가 있다면 0.5로 낮추는 것을 고려하세요.
• 미리보기 이미지는 몇 개의 고정된 테스트 프롬프트와 클러스터링 데이터셋 특징에서 파생된 여러 프롬프트를 사용하여 생성되었습니다. 랜덤 시드가 사용되었으며, 선택적 추출은 배제되었습니다. 보이는 그대로 결과가 나옵니다.
• 복장에 대한 특수한 트레이닝은 진행되지 않았습니다. 제공된 미리보기 게시물에서 복장에 해당하는 프롬프트를 확인할 수 있습니다.

이 모델 사용법

이 모델은 두 개의 파일로 구성되어 있습니다. 두 파일을 함께 사용해야 합니다!!!. 이 경우, fischl_genshin.pt와 fischl_genshin.safetensors 두 파일을 모두 다운로드한 후, fischl_genshin.pt를 텍스처 반전 임베딩으로 사용하고, 동시에 fischl_genshin.safetensors를 LoRA로 사용해야 합니다.

트리거 단어는 fischl_genshin이며, 권장 태그는 best quality, masterpiece, highres, solo, {fischl_genshin:1.15}, blonde_hair, long_hair, bangs, eyepatch, green_eyes, two_side_up, ribbon, hair_over_one_eye, hair_ribbon, breasts, blush, bow, medium_breasts입니다.

이 모델의 학습 방법

이 모델은 HCP-Diffusion을 사용하여 학습되었습니다. 자동 학습 프레임워크는 DeepGHS Team에서 유지보수하고 있습니다.

일부 미리보기 이미지가 Fischl Genshin처럼 보이지 않는 이유

미리보기 이미지에 사용된 모든 프롬프트 텍스트(이미지를 클릭하면 확인 가능)는 학습 데이터셋에서 추출된 특징 정보를 기반으로 클러스터링 알고리즘을 통해 자동 생성되었습니다. 이미지 생성에 사용된 시드도 임의로 생성되었으며, 모든 이미지는 선택 또는 수정되지 않았습니다. 따라서 이러한 문제가 발생할 가능성이 있습니다.

실제 사용 시, 우리 팀 내부 테스트 결과에 따르면 이러한 문제가 발생하는 대부분의 모델이 미리보기 이미지보다 실제 사용 시 더 나은 성능을 보입니다. 필요한 유일한 조치는 사용하는 태그를 조정하는 것입니다.

이 모델이 과적합되거나 과소적합되었다고 느껴지면 어떻게 해야 하나요?

우리의 모델은 huggingface 저장소 - CyberHarem/fischl_genshin_에 공개되어 있으며, 모든 학습 단계의 모델이 저장되어 있습니다. 또한 학습 데이터셋은 huggingface 데이터셋 - CyberHarem/fischlgenshin에 공개되어 있어 도움이 될 수 있습니다.

왜 더 잘 선정된 이미지만 사용하지 않나요?

이 모델의 전체 과정—데이터 크롤링, 학습, 미리보기 이미지 생성 및 게시—는 인간의 개입 없이 100% 자동화되었습니다. 이는 우리 팀이 진행하는 흥미로운 실험이며, 이를 위해 데이터 필터링, 자동 학습, 자동 게시를 포함한 완전한 소프트웨어 인프라를 개발했습니다. 따라서 가능한 한 더 많은 피드백이나 제안을 주시면 귀중한 자료가 됩니다.

원하는 캐릭터의 복장을 정확하게 생성할 수 없는 이유

현재 학습 데이터는 다양한 이미지 웹사이트에서 수집되었으며, 완전한 자동화 파이프라인에서는 캐릭터가 보유한 공식 이미지를 정확히 예측하기 어렵습니다. 따라서 복장 생성은 학습 데이터셋의 레이블을 기반으로 클러스터링을 수행하여 최선의 재현을 시도합니다. 우리는 이 문제를 지속적으로 해결하고 최적화를 시도할 것이지만, 완전히 해결하기 어려운 도전 과제입니다. 복장 재현의 정확도는 수동으로 학습된 모델과 동일한 수준에 도달하기 어렵습니다.

사실, 이 모델의 가장 큰 강점은 캐릭터 자체의 고유한 특징을 재현하는 능력과 더 큰 데이터셋으로 인한 상대적으로 강력한 일반화 능력입니다. 따라서 이 모델은 복장을 변경하거나 캐릭터의 자세를 조정하는 작업에 적합하며, 물론 캐릭터의 NSFW 이미지를 생성하는 데에도 적합합니다!😉

다음과 같은 그룹은 이 모델 사용을 권장하지 않으며, 이에 대해 사과드립니다:

1. 원래 캐릭터 디자인의 가장 사소한 차이조차도 용인할 수 없는 분들.
2. 캐릭터 복장 재현에 높은 정확도가 요구되는 적용 환경을 가진 분들.
3. Stable Diffusion 알고리즘 기반의 AI 생성 이미지에서 발생할 수 있는 임의성을 받아들일 수 없는 분들.
4. LoRA를 사용한 캐릭터 모델 학습의 완전 자동화 과정을 불편하게 여기거나, 캐릭터를 존중하기 위해서는 수동 학습만이 유일한 방법이라고 믿는 분들.
5. 생성된 이미지 내용이 자신의 가치관에 어긋난다고 느끼는 분들.