lisa/リサ/丽莎 (Genshin Impact)

• Civitai의 이용 약관으로 인해 일부 이미지를 업로드할 수 없습니다. 완전한 미리보기 이미지는 HUGGINGFACE에서 확인하실 수 있습니다.
• 이 모델은 2개의 파일로 구성되어 있습니다. a1111의 WebUI v1.6 이하 버전을 사용 중이라면, 두 파일을 반드시 함께 사용해야 합니다!!! WebUI v1.7 이상을 사용하는 경우, 일반 LoRA처럼 safetensors 파일만 사용하시면 됩니다.
• 추출된 캐릭터 태그는 long_hair, breasts, green_eyes, brown_hair, bangs, large_breasts, hat, witch_hat, purple_headwear, hair_between_eyes, hair_ornament, hair_flower입니다. 캐릭터의 핵심 특징(예: 머리색)이 안정적이지 않을 때 이 태그들을 프롬프트에 추가할 수 있습니다.
• pt 파일의 권장 가중치는 0.7–1.1, LoRA의 권장 가중치는 0.5–0.85입니다.
• 이미지는 일부 고정 프롬프트와 데이터셋 기반 클러스터링된 프롬프트를 사용하여 생성되었습니다. 랜덤 시드를 사용했으며, 선택적 편향은 배제되었습니다. 여기에 보이는 것이 바로 얻을 수 있는 결과입니다.
• 의상에 대한 특별한 트레이닝은 진행되지 않았습니다. 제공된 미리보기 포스트를 확인하면 의상에 대응하는 프롬프트를 확인할 수 있습니다.
• 이 모델은 1334장의 이미지로 학습되었습니다.

이 모델 사용법

이 모델은 2개의 파일로 구성되어 있습니다. WebUI v1.6 이하 버전을 사용 중이라면 반드시 두 파일을 함께 사용해야 합니다!!! 이 경우, lisa_genshin.pt와 lisa_genshin.safetensors를 모두 다운로드한 후, lisa_genshin.pt를 embeddings 폴더에 넣고, 동시에 lisa_genshin.safetensors를 LoRA로 사용해야 합니다. WebUI v1.7+를 사용 중이라면 일반 LoRA처럼 safetensors 파일만 사용하시면 됩니다. 이는 임베딩이 포함된 LoRA/Lycoris 모델이 이제 a1111 WebUI에서 공식적으로 지원되기 때문입니다. 자세한 내용은 여기를 참조하세요.

このモデルには2つのファイルがあります。WebUI v1.6 以下のバージョンを使用している場合は、これらを一緒に使用する必要があります！！！ この場合、lisa_genshin.pt と lisa_genshin.safetensors の両方をダウンロードする必要があり、 その後、lisa_genshin.pt を embeddings フォルダに入れ、同時に lisa_genshin.safetensors をLoRAとして使用します。 webui v1.7+を使用している場合、一般的なLoRAsのようにsafetensorsファイルを使用してください。 これは、埋め込みバンドルされたLoRA/Lycorisモデルが現在、a1111のwebuiに公式にサポートされているためです。 詳細についてはこちらをご覧ください。

此模型包含两个文件。如果您使用的是 WebUI v1.6 或更低版本，您需要同时使用这两个文件！ 在这种情况下，您需要下载 lisa_genshin.pt 和 lisa_genshin.safetensors 两个文件， 然后将 lisa_genshin.pt 放入 embeddings 文件夹中，并同时使用 lisa_genshin.safetensors 作为 LoRA。 如果您正在使用 webui v1.7 或更高版本，只需像常规 LoRAs 一样使用 safetensors 文件。 这是因为嵌入式 LoRA/Lycoris 模型现在已经得到 a1111's webui 的官方支持， 更多详情请参见这里。

트리거 단어는 lisa_genshin이며, 추출된 태그는 long_hair, breasts, green_eyes, brown_hair, bangs, large_breasts, hat, witch_hat, purple_headwear, hair_between_eyes, hair_ornament, hair_flower입니다. 어떤 특징(예: 머리색)이 불안정할 때 이 태그들을 프롬프트에 추가하세요.

이 모델의 학습 방법

• 이 모델은 HCP-Diffusion으로 학습되었습니다.
• 자동 학습 프레임워크는 DeepGHS Team에서 유지 관리됩니다.
• 학습에 사용된 베이스 모델은 deepghs/animefull-latest입니다.
• 학습에 사용된 데이터셋은 CyberHarem/lisa_genshin의 stage3-p480-800이며, 총 1334장의 이미지를 포함합니다.
• 배치 크기는 4, 해상도는 720x720, 5개의 클러스터로 분류되었습니다.
• 정규화 데이터셋의 배치 크기는 1, 해상도는 720x720, 20개의 클러스터로 분류되었습니다.
• 10,000 스텝 동안 학습하였으며, 40개의 체크포인트가 저장되고 평가되었습니다.

자세한 학습 정보는 huggingface 저장소 - CyberHarem/lisa_genshin을 참조하세요.

일부 미리보기 이미지가 캐릭터와 달라 보이는 이유

미리보기 이미지(이미지를 클릭하면 볼 수 있음)에 사용된 모든 프롬프트 텍스트는 학습 데이터셋에서 추출된 특징 정보를 기반으로 클러스터링 알고리즘을 사용해 자동 생성되었습니다. 이미지 생성 시 사용된 시드도 랜덤으로 생성되었으며, 어떤 선택이나 수정도 이루어지지 않았습니다. 따라서 위와 같은 현상이 발생할 수 있습니다.

사실, 내부 테스트 결과에 따르면 이런 현상이 나타나는 대부분의 모델은 실제 사용 시 미리보기 이미지보다 더 나은 성능을 보입니다. 필요한 유일한 조치는 사용 중인 태그를 조정하는 것입니다.

이 모델이 과적합 또는 과소적합된 것 같은데, 어떻게 해야 할까요?

여기 표시된 스텝은 자동으로 선택된 것입니다. 우리는 다른 좋은 스텝들도 추천해 드립니다. 좋아하는 스텝을 선택하려면 여기를 클릭하세요.

우리의 모델은 huggingface 저장소 - CyberHarem/lisa_genshin에 게시되었으며, 모든 스텝의 모델이 저장되어 있습니다. 또한 학습 데이터셋은 huggingface 데이터셋 - CyberHarem/lisa_genshin에 공개되어 있으며, 이는 여러분에게 도움이 될 수 있습니다.

왜 더 나은 이미지만 선택하지 않았나요?

이 모델의 데이터 수집, 학습, 미리보기 이미지 생성 및 게시까지의 전체 프로세스는 인간의 개입 없이 100% 자동화되었습니다. 이는 우리 팀이 수행한 흥미로운 실험으로, 데이터 필터링, 자동 학습, 자동 게시를 포함한 완전한 소프트웨어 인프라를 구축했습니다. 따라서 가능하다면, 피드백이나 제안을 더 많이 주시면 매우 소중하게 여겨집니다.

원하는 캐릭터 의상을 정확히 생성할 수 없는 이유

현재 학습 데이터는 다양한 이미지 웹사이트에서 가져왔으며, 완전한 자동화 파이프라인에서는 캐릭터가 실제로 가지고 있는 공식 이미지를 정확히 예측하기 어렵습니다. 따라서 의상 생성은 학습 데이터셋에서 추출된 라벨을 기반으로 클러스터링하여 가능한 최선의 재현을 시도합니다. 우리는 이 문제를 계속해서 해결하고 최적화하려 노력할 것이지만, 완전히 해결하기 어려운 도전 과제입니다. 의상 재현의 정확도는 수작업으로 학습한 모델의 수준에 미치지 못할 가능성이 높습니다.

실제로 이 모델의 가장 큰 강점은 캐릭터 본연의 특징을 재현하고, 더 큰 데이터셋 덕분에 비교적 강력한 일반화 능력입니다. 따라서 이 모델은 의상 변경, 캐릭터 포즈 조정, 물론 캐릭터의 NSFW 이미지 생성과 같은 작업에 적합합니다!😉

다음과 같은 사용자들에게는 이 모델 사용을 권장하지 않으며, 이 점 사과드립니다:

1. 캐릭터 디자인의 가장 미세한 차이점이라도 허용하지 못하는 분들.
2. 캐릭터 의상 재현의 정확도에 높은 요구를 하는 분들.
3. Stable Diffusion 알고리즘을 기반으로 한 AI 생성 이미지의 잠재적인 무작위성에 수용하지 못하는 분들.
4. LoRA를 사용한 캐릭터 모델 학습의 완전 자동화 프로세스에 불편함을 느끼거나, 캐릭터를 존중하기 위해 반드시 수작업으로만 학습해야 한다고 믿는 분들.
5. 생성된 이미지 내용이 자신의 가치관에 반하는 것을 받아들이지 못하는 분들.