SDXL - LoRA+Embedding - Eye Bleach ( Don't mind this one )

세부 정보

모델 설명

V.3.0 - 네거티브 임베딩 (LoRA 아님!)

어떤 사진에든 아마도 사용할 것이기 때문에 이걸 빨리 공개하고 싶었습니다. 특히 안개, 흐림, 색상이 흐릿해지고 혼란스러워지는 경향이 있는 일부 LoRA와 조합했을 때 그 효과를 잘 알고 있기 때문에, 좀 더 공격적으로 만들 필요가 있었죠. 때로는 그런 효과가 의도된 것이며 분위기를 더해 주기도 합니다. 제가 올린 몇 가지 예시는 오히려 이를 제거한 것이 더 나아 보이기도 합니다. 저도 그 사진들이 원래부터 고화질이 아니라는 걸 알고 있습니다. 단지 효과를 보여주고 싶었을 뿐입니다.

이 임베딩을 만든 주된 이유는, 어떤 LoRA(아마도 곧 공개할지도 모릅니다)와 여러 다른 LoRA를 조합해 테스트했기 때문입니다. 처음에는 한 LoRA가 다른 LoRA를 압도해 버려서, 한쪽의 강도를 줄이면 스타일이나 효과가 사라지는 문제가 있었습니다. 그런데 이상하게도 이 임베딩을 사용하니 조합이 � нам 훨씬 명확해졌습니다.

물론 이건 제가 결과가 엉망이 될 것임을 알고 있는, '한계까지 밀어붙인' 테스트였습니다.

제가 만든 거의 모든 것처럼, 이건 운에 의존하는 경우가 많습니다. 다만, 이걸 사용할 때는 CFG 스케일을 낮추는 것이 좋을 수 있습니다. 저는 낮은 CFG에서 더 나은 결과를 얻었고, 보이는 바에 따르면(순전히 추측이지만) 마치 더 높은 CFG 스케일 효과를 내는 것처럼 보입니다. 너무 높이 설정하면 망가질 수 있죠.

  • 지난번처럼, 첫 번째 이미지는 항상 임베딩 없이 생성된 것입니다.

  • Pony에도 어느 정도 적용되지만 효과는 약합니다. 특히 score_up을 사용하지 않으면 이상한 결과가 나옵니다. score_up은 실제로 특정 스타일을 강제로 적용하는데, 이 스타일들은 모두 비슷해 보일 수 있지만, 이를 사용하지 않으면 해부학적 오류가 생기기 쉽습니다.


V2.0 - 네거티브 임베딩 (LoRA 아님!)

이 5KB짜리 거대한 파일을 보세요. 이걸 저장하려고 데이터센터를 전부 사야 할까 싶을 정도였죠.

LoRA 카테고리에 포함되지 않도록 따로 올릴 걸 그랬나 싶지만... 어차피 파일 업로드할 때 LoRA만 선택 가능했어요.

텍스추얼 인버전을 처음 사용해봤습니다. LoRA 버전도 좋아하지만, 제가 진짜 원하는 작업을 위한 더 나은 솔루션을 찾고 있었습니다. 임베딩이 더 나은 해결책처럼 보였고, 이상하게도 훈련이 더 어려웠고(VRAM도 더 많이 사용했습니다).

이제 제대로 작동하는 것 같습니다. 불쾌한 요소(제 적인 안개, 흐림, 아티팩트 등)를 제거하고, 이미지를 더 선명하고 대비 있게 만들어 줍니다. 이상하게도 LoRA처럼 무작위 디테일도 추가합니다.

몇 가지 모델을 테스트해봤는데, 일부는 이상한 반응을 보였습니다. 제 기준으로도 매우 이상한 프롬프트를 사용했는데, 아이디어는 있었지만 실제로 유용한 결과를 얻을 수 없었습니다. 그런데 이 임베딩을 적용하자마자 밤과 낮의 차이처럼 완전히 달라졌습니다. 이미지가 완전히 바뀌고 프롬프트를 훨씬 더 잘 따랐습니다. 여전히 엉망이었지만, 이런 결과는 예상하지 못했습니다.

지금은 이걸 사용해 보면서 진짜 어떤 효과를 내는지 알아볼 예정입니다. 또한 다른 TI 도구도 더 테스트해볼 계획입니다.

  • 첫 번째 이미지는 항상 임베딩 없이 생성된 것(동일 시드, 동일 모델).

  • 꽃이 있는 이미지는 이상한 행동을 잘 보여줍니다.


V1.0

여기서 볼 게 전혀 없습니다. 이 LoRA를 훈련시키기 위해 사용한 이미지들은 아이디어는 있었지만, 모두 흐릿하고 잡음이 많으며 과포화되어 있고, 스크래치, 반점, 렌즈 플레어, 색수차, 카우스틱스 같은 극단적인 조명 효과가 가득했습니다... 그리고 다른 여러 가지 요소들까지.

원래 계획과는 완전히 다른 방향으로 진행된 실험입니다. 단지 제가 이 LoRA를 일부 이미지에 사용할 가능성이 있기 때문에 여기에 올립니다. 누군가 이걸 재현하고 싶다면 필요할 수 있으니까요. 이 LoRA를 사용한 이미지는 여기에 동시에 게시될 것 같습니다.

이게 뭐 하는지 물어보지 마세요. 아직 저도 확실하지 않지만, 이상하게도 긍정적인 결과를 얻었습니다. 오히려 원래 의도와 정반대였던 것이죠... 혹은 보조 도구로 쓰려고 했던 것이고요.

누군가 “어, 신비한 LoRA, 클릭베이트?”라고 말할지 몰라도, 이건 다른 LoRA의 효과를 강화하고, 모든 것을 약간 더 선명하고 사실적으로(혹은 흐릿하고 비현실적으로) 만들어 줍니다. 강도를 1~1.2에서 음수 강도 -0.5로 바꾸면 완전히 달라지기도 합니다. 이게 단순한 플레이서보 효과인지 모르겠지만, 동일한 프롬프트와 시드로 테스트한 결과는 일관되었습니다. 음수 강도를 설정하는 것이 더 낫다고 생각할 수 있지만, 오히려 정반대입니다. 정말 놀라운 현상입니다.

제가 이걸 어떻게 써야 할지 결정할 때까지는 거의 저만의 도구로 남을 것입니다. 제가 생각한 대로 작동하지 않으면 삭제할 계획입니다.


  • 잠깐 시도해보니, 동일한 시드로 양의 강도에서 음의 강도까지 테스트해보니, 결과는 완전히 다른 방향으로 가거나, 프롬프트를 따르긴 했지만 큰 차이가 생기거나, 심지어 아주 기이한 내용도 프롬프트를 정확히 따르는 결과를 내기도 했습니다.

이 모델로 만든 이미지

이미지를 찾을 수 없습니다.