Flux.1-D + PDXL Consistency OUTDATED

세부 정보

파일 다운로드

모델 설명

블랙 포레스트 랩스, 인코. 직원분들께 큰 박수를 보냅니다. 여러분의 열심한 노력이 훌륭한 성과로 이어졌습니다. Flux는 진정한 성취입니다.

사용 가능한 거의 모든 Flux 워크스페이스에서 ComfyUI로 실행해보세요. 아래에 편리한 워크플로우를 포함한 이미지를 첨부했습니다.

이 방법은 클립과 개발 모델을 결합한 것 중에서 제가 발견한 가장 빠르고 실용적인 방법입니다. 전체 조합이 제 VRAM을 모두 소모하고 컴퓨터를 정지시켰던 것과 달리, 이 방법은 약 20GB 미만의 VRAM으로 실행됩니다. 16스텝으로 생성하는 데 보통 20초도 안 걸리며, 이전 기본 전체 버전(이미지당 약 2분 소요)보다 훨씬 빠릅니다. 또한 새로 스타일화된 표면에 텍스트를 성공적으로 도입합니다.

제 SD3 일관성 LoRA 학습에서 기능적인 L 클립을 Pony Realism의 L과 병합한 후, Flux의 약 80% 정도의 Flux Clip L에 주입했습니다. 아래에 전체 병합 레시피를 제공합니다. 동일한 결과가 나올 수도 있고 아닐 수도 있으며, 완전한 조합을 정확히 기억하지 못합니다. 제가 병합한 모든 요소는 현재 온라인에서 제공되므로, 제가 만든 것을 그대로 쓰지 말고 직접 실험해보세요. 그러면 훨씬 더 즐겁고, 더 나은 결과를 얻거나 심지어 훨씬 더 뛰어난 결과를 만들 수도 있습니다.

이 방법은 매우 흥미로운 스타일적 차이점을 도입하며, 오히려 심각하게 망가뜨리지 않습니다. 표준 Flux보다 더 많은 스텝이 필요하며, VAE는 내장되어 있습니다.

프롬프트

Pony 병합으로 인해, 이 모델은 score 태그에 반응하는 것으로 보입니다.

단일 프롬프트를 사용하는 경우, 이 방식이 꽤 효과적입니다. 실험해보세요.

three people, count people in plain english for flux,
단일 프롬프트를 사용할 경우 이와 유사하게 프롬프트를 기술하세요. 개별 문장은 쉼표로 구분하되 마침표는 사용하지 마세요.

score_9, score_8_up, score_7_up,
1girl, 2girl, etc for danbooru and consistency anime,

기타 인물 태그 및 추가 설명,

추가 설명을 위한 다른 danbooru 태그, 여기서는 강도를 증가해 사용하세요.

배경이 아닌 오버레이에 기반한 최종 설명으로 마무리하세요. 예: 텍스트 또는 구체적인 상세 오버레이 스타일

Flux는 일부 danbooru 태그를 내장하고 있지만, 많지는 않습니다. 일부는 있긴 합니다. 주로 safebooru 태그인 것 같습니다.

설정

16스텝 이상에서 눈에 띄게 품질이 향상됩니다.

euler

16 steps

생성 시간은 평균 20초 미만이었습니다.

Flux의 표준 설정 1을 사용했으며, 7을 실험하면서 Pony Realism을 목표로 할 때 결과를 얻었습니다. 약 5에서 이상한 방식으로 조합이 도입되는 것처럼 보였습니다.

config rescale 노드는 성능을 저하시키지만 어떤 효과는 있습니다.

sd3 scale은 완전히 망가뜨리므로 사용하지 마세요.

실험 결과, CLIP_L이 원래 Flux CLIP_L에서 벗어날수록 출력 이미지가 더 분리되고 더 다르게 나타났습니다. 약 20%의 Flux 파워에서 Realism + Consistency와 거의 유사한 맥락을 생성했지만, 이미지가 완전히 분리되고 부자연스러웠습니다. 형태는 유지되었기 때문에 조정을 반복하며, 통합적이고 일관된 방식으로 결합된 조합을 찾아냈습니다.

제가 기억하는 레시피

PDXL Autism CLIP_L: 0.67
Consistency V1.1 LOHA: 0.33
→ Autism_Consistency_Clip_L 탄생
PDXL Autism_Consistency CLIP_L: 0.2
SD3 CLIP_L: 0.8
→ SD3_Consistency_Clip_L 탄생
LORA FINETUNE → 0.8 LORA + SD3 MERGE CLIP_L
SD3_Consistency_Clip_L 탄생.

SD3_Consistency_Clip_L: 0.5
Pony_Realism_V2.1 CLIP_L: 0.5
→ STAGE_2_CONSISTENCY_REALISM_EXPERIMENT_SDXL_SD3
원래 SD3와의 조합은 별로 흥미롭거나 강력하지 않아서 포기했습니다.

Flux 병합:
STAGE_2_CONSISTENCY_EXPERIMENT_SDXL_SD3: 0.2
Flux_Clip_L: 0.8
→ 현재 V1.0 Flux + Consistency

PDXL + Flux 워크플로우

Flux와 PDXL을 혼합하는 편리한 워크플로우를 첨부했습니다. 아래 갤러리에서 두 소녀의 이미지를 드래그하여 ComfyUI에 넣으면 Flux + PDXL 워크플로우를 사용할 수 있습니다. 필수는 아니지만, 흥미로운 가능성을 제공합니다. PDXL을 해제하고 상단 두 프롬프트만 사용하면 단순히 Flux만 사용할 수 있습니다.

PDXL Autism Mix + 0.33 강도로 병합된 Consistency LOHA Version 1.1

SD3SD3 LORA experiment v0.3에 미세 조정했으며, SimpleTuner로 학습했습니다.

PDXL Realism 2.1

이 모델로 만든 이미지

이미지를 찾을 수 없습니다.