In container: in box / in bottle / in fishbowl / in trash can / in suitcase / in bag / in locker ...
세부 정보
파일 다운로드
모델 설명
이 LoHa(아래에서 간단히 lora라고 표현함)의 목적은 "소속된 상태" 개념을 일반적으로 개선하는 것이다.
---
어떤 이유에서인지 '트렁크 안에'와 '수하물 박스 안에' 이미지가 제거되었음 (아마도 성인 콘텐츠로 표시해야 할지도 모르겠음?)
그러므로 관심 있는 분들을 위해 여기에 이미지를 다시 업로드함: 트렁크 안에, 수하물 박스 안에
---
예상됐듯이, 개념용 lora는 제작이 훨씬 어려우며 모델을 바꾸기 쉬울수록 취약하다.
이 LoHa는 ACertainy 모델에 clip skip 1로 훈련되었으나(clip skip 1뿐만 아니라 2도 사용 가능함 — 마지막 두 이미지 참조), 상당히 거리가 먼 모델을 사용할 경우 제대로 작동하지 않을 가능성 있음.
이 문제에 대응해, 본 lora 사용 시 몇 가지 팁을 제공함.
일반적인 전략 중 하나는 lora의 가중치를 낮추는 것. 그러나 이상한 아티팩트가 줄어들긴 하나, 개념을 정확하게 구현할 확률도 감소함.
먼저 ACertainty 모델을 사용해 txt2img로 이미지를 생성한 후, 다른 모델에서 img2img를 작동시키는 방법. 냉장고 이미지의 경우 내가 이렇게 했음. 두 번째 단계에서는 여전히 lora 가중치를 낮춰야 할 가능성이 있음.
개인적으로 나는 ACertainty에 가까운 합성(merge) 모델을 사용함. 이는 다른 모델과의 차이를 더함: AC+w(model1-model2)
정말 이 lora가 필요할까?
사실, 해당 개념의 대부분은 이미 인기 있는 모델로 직접 생성이 가능함. 예를 들어 '컵 안에', '볼 안에', '박스 안에' 등은 이미 잘 되고 있음.
더불어 CivitAI에는 비슷한 목적의 여러 lora가 이미 존재하며, 원하는 결과에 따라 더 적합할 수 있음 (박스 안에 또는 소속된 상태/인 컨테이너 등을 검색해 보시면 됨).
그러나 '수하물 박스 안에', '가방 안에' 같은 특정 개념의 경우, 이 lora 없이 작동시킬 수 있는 만큼 유능한 프롬프팅 능력과 모델 내 직접 구현 전략을 보유하지 않는 한, 훨씬 쉽지 않을 수 있음. 물건별로 lora의 효과가 다르므로, 실제로 어떻게 달라지나 확인하는 유일한 방법은 직접 시도해 보는 것뿐임.
각 하위 개념에 대한 보다 자세한 설명
일반적인 조언: 작은 물건 안에 사람을 넣고 싶을 때, chibi, 미니 인물, 미니걸 등을 추가하면 도움이 됨. 태아 자세(fetal position) 역시 일반적으로 관련 있는 태그임.
'소속된 상태(in container)'는 일반적인 태그이며, 항상 포함하는 것이 좋음.
'수하물 박스 안에(in suitcase)', '가방 안에(in bag)', 'closet 안에(in closet)', '병 안에(in bottle)', '냉장고 안에(in refrigerator)', '바구니 안에(in basket)'는 매우 잘 작동하며, 기본 모델의 능력을 능가함.
'박스 안에(in box)', '발라스 안에(in bucket)', '볼 안에(in bowl)', '컵 안에(in cup)'의 경우, 대부분의 모델이 이미 이를 구현할 수 있기 때문에 이 lora를 쓰는 것이 진정한 차이를 만드는지는 판단하기 어려움.
'쓰레기통 안에(in trash can)'은 꽤 잘 작동하지만, 블루 어카이브의 마이유 캐릭터에 과도하게 피팅됨.
'트렁크 안에(in trunk)'는 작동은 하지만 과적합되어 있어 사람의 크기와 자동차의 크기를 정확히 알지 못함.
'락커 안에(in locker)', '스택 안에(in sack)', '완충 간이 케이지 안에(in cage)'는 다루기 어려워서 거의 좋은 결과를 얻기 힘듦.