이것은 연한 베이지 색의 린넨 드레스를 생성하기 위한 간단한 LoRA입니다.
(편집: 더 현실적인 모델에서는 작동하지 않는 것 같습니다. 원래 애니메이션 모델에서 작동하도록 다소 강제적으로 훈련된 것으로 보입니다. AnythingV5, AnyLora, YesMix 등의 모델에서 가장 잘 작동하며, AOM2 또는 기타 매우 스타일리시하거나 현실적인 모델에서는 작동하지 않습니다.)
사용 방법: 가중치 1.0(또는 그 이하), 일반적인 CFG, 트리거 단어 linen dress, 그리고 부정적 프롬프트에 realistic 단어를 추가하세요. 잘 트레이닝된 스타일 LoRA를 함께 추가하면 더 좋은 결과를 얻을 수 있습니다. 예시 이미지를 참고하세요. 저는 다른 나의 스타일 및 캐릭터 LoRA들을 결합하여 사용했습니다.
이 LoRA는 사진만으로 옷을 훈련시켜 애니메이션 모델에 활용할 수 있는 방법을 찾아보기 위해 제작했습니다. 이 모델은 NAI를 사용해 임의의 옷 가게에서 얻은 한 벌의 드레스에 대한 8장의 사진으로 훈련되었습니다.
주요 과제는 애니메이션 스타일에 영향을 주지 않으면서 드레스를 사용하는 것이었는데, 즉 현실적으로 보이지 않도록 하는 것이었습니다. 다양한 LoRA 가중치 조합을 시도해보았지만, 실제 드레스와 그 세부 사항의 훈련에 영향을 주지 않고 블록을 선택하는 방법을 찾지 못했습니다. 수십 번의 시도를 했습니다! 두 번째 과제는 매우 미세한 꽃무늬 패턴을 표현하는 것이었습니다. 현실성에 영향을 주는 블록의 학습을 비활성화하면 이 패턴의 훈련에도 영향을 미치게 됩니다. 예시 이미지에서 보다시피, 이 패턴이 자주 등장하지만 항상 나타나지는 않습니다.
결국 최고의 결과는 특정 훈련 파라미터(LR/옵티마이저/배치/반복 횟수), 일부 블록 비활성화, 그리고 데이터셋에 "(realistic:1.3)" 태깅하고 kohya-ss GUI의 가중 카피션 옵션을 사용한 조합을 통해 얻어졌습니다.