Paper Marbling Flux
세부 정보
파일 다운로드
이 버전에 대해
모델 설명
이것은 이미지 생성에 대리석 무늬 종이 패턴을 추가하는 Flux LoRA입니다. 패턴은 파도/나선형과 점/덩어리로 구성됩니다. 일반적으로 점과 덩어리는 배경 요소에, 파도와 나선형은 물체와 가장자리에 적용됩니다. 대상 주제가 자연스럽게 나선형이거나 점으로 구성되어 있다면, 이 LoRA는 그러한 효과를 강화합니다. 생성된 이미지는 그림이나 채색된 스타일로 유도됩니다.
위키백과 - 종이 대리석 무늬:
https://en.wikipedia.org/wiki/Paper_marbling
이 모델은 Stable Diffusion v1.x용 TI 임베딩으로 시작된 시리즈의 일부입니다:
그리고 Stable Diffusion XL용 TI 임베딩:
그리고 Stable Diffusion XL용 LoRA:
/model/290258/paper-marbling-lora-sdxl
TI는 몇 kB 크기의 작은 파일로, 단순한 종이 대리석 무늬를 생성하지만 일부 장식적인 일러스트레이션 작업에는 매우 훌륭합니다. TI의 효과는 체크포인트마다 크게 달라질 수 있는데, 이는 TI가 체크포인트 내의 기존 콘텐츠를 활용하기 때문입니다.
LoRA는 체크포인트에 _추가_되는 방식이므로, 다양한 체크포인트 간에 효과 차이가 크게 나타나지 않습니다. 종이 대리석 무늬의 경우, 이 LoRA와 SDXL 버전은 실제 고전적인 대리석 종이와 비슷한 더 현실적인 패턴을 생성합니다.
이번에는 대상이 Flux이므로, CivitAI의 트레이너를 사용해 LoRA를 제작했습니다. 이 LoRA는 제 SDXL 종이 대리석 무늬와 거의 동일한 데이터셋을 사용하지만, 일부 재처리 및 기본 캡션을 추가했습니다. 효과는 여러 요인에 따라 미묘한 것에서 과도할 정도로 강력한 것까지 다양하게 나타날 수 있습니다. 여기서 일부 문제는 Flux.1.DEV가 제어하기 어렵다는 점인데, 이는 “디스틸린” 모델이기 때문이라고 합니다.
“강화” 트리거 문구를 내장하려고 시도했습니다. Flux는 SDXL처럼 트리거를 좋아하지 않는 것처럼 보이지만, 사용 가능한 토큰 시퀀스를 만들 수는 있습니다. 이 LoRA의 강화 트리거는 따옴표 없이 “marbled art paper”입니다. Flux에서는 대리석 관련 단어 대부분이 돌 종류의 대리석 효과를 유발합니다. Flux는 종이 대리석 무늬에 대해 거의 알지 못하는 것 같습니다. 제 생각에는, 모든 훈련 이미지의 캡션에 “marbled art paper”를 포함시키면, Flux가 돌 대리석보다 종이 대리석 쪽으로 더 강하게 유도될 것이라고 기대합니다.
이 초기 버전에서 LoRA 및/또는 트리거 문구는 회화적인 효과를 생성합니다. 때로는 과도하게 나타나므로, LoRA의 가중치를 가끔 낮추는 것이 필요할 수 있습니다.
아래는 일부 with/without 이미지 그룹을 보여줍니다. 이는 Forge에서 생성된 XYZ 그리드입니다. 각 4장의 이미지 그룹은 다음과 같습니다:
왼쪽 상단: LoRA + “marbled art paper”
왼쪽 하단: LoRA만
오른쪽 상단: “marbled art paper”만
오른쪽 하단: 둘 다 없음
각 그리드는 비교적 간단한 프롬프트에 with/without 변형을 적용했습니다.
이 그리드들이 이 LoRA를 시도할지 여부를 결정하는 데 도움이 되었으면 합니다.
쇼케이스 이미지는 LoRA의 효과를 더 강조하기 위해 복잡한 프롬프트를 사용했습니다. 모두 Forge에서 생성되었으며 Hires.fix를 사용할 수 있지만, 다른 LoRA, ControlNet, 디테일러/FX 플러그인 또는 후처리는 전혀 사용하지 않았습니다.
[PUBLISHEDTOCIVITAIONLY]