RunDiffusion XL

RunDiffusion XL Beta 도입!

RunDiffusion.com이 또 한 번 놀라운 성과를 이뤄냈습니다! 세계 최초의 SDXL 모델 중 하나입니다!

15,000명의 멤버가 있는 디스코드 서버에 참여하세요 – 프로젝트를 도와드리고, 최선의 실무를 논의하며, 흥미로운 업데이트와 뉴스를 공유하고, 생성한 놀라운 예술 작품을 함께 나누세요.

왜요? SDXL은 이미 놀라운데요?

네! 하지만我们认为 이 버전은 한층 더 발전했습니다! SDXL은 사람들의 표정이 플라스틱처럼 보이고, 눈, 손, 추가된 팔다리가 문제가 되곤 했습니다. 우리는 모든 문제를 해결하지는 못했습니다(그래서 베타 버전입니다). 하지만 거의 다 해결했습니다! 우리는 Civitai.com에서 직접 가져온 수백 개의 SDXL 프롬프트를(ComfyUI 사용) 테스트하여 파이프라인을 동일하게 유지했고, 이 모델이 더 나은 이미지를 생성한다는 것을 확인했습니다. 아래에서 직접 확인해보세요.

이 모델은 전신보다는 클로즈업 또는 '헤드샷'을 더 선호하는 경향이 있습니다. 이 특징이 의도된 것인지 확신이 서지 않습니다. 피드백을 환영합니다.

장점

• 동물, 자동차, 사람에 대한 사진처럼 사실적인 표현이 향상되었습니다.
• 다른 모델, 다른 생성 결과입니다. 좋아하는 프롬프트로 시도해보세요!
• 초상화 품질이 향상되었습니다. SDXL은 주제를 너무 멀리 떨어뜨리는 경향이 있는데, 이 모델은 더 가까이 끌어옵니다.
• 눈과 손이 약간 더 자연스러워졌습니다(테스트 결과).
• 프롬프트 제어가 향상되었습니다. 반드시 쉼표를 사용하여 주제와 스타일을 분리하세요!

단점

• 여전히 일부 개념이 ‘플라스틱’처럼 보입니다(음식 등 – 프롬프트를 테스트해보고 알려주세요!)
• 때때로 너무 ‘사람 중심’일 수 있습니다.
• 창의성이 약간 제한됩니다. 이는 ‘사진처럼 사실적인’ 모델로 간주될 수 있습니다. 하지만 다시 한 번, 테스트해보세요!
• ‘스포츠카’에 대한 편향이 있습니다. lol

RDXL은 프롬프트를 더 잘 따릅니다. “상체”를 요청하면 그에 맞춰 생성합니다.

사용 방법

• 일반처럼 프롬프트를 입력하세요. 주제와 스타일은 쉼표로 분리하세요. 원하는 결과가 나오지 않으면, 토큰을 다시 사용하세요. 예: \``iron man made of lava, suit of armor infused with molten lava, ...etc`에서 아이언맨이 생성되지 않으면, `iron man made of lava, suit of armor infused with molten lava, marvel iron man super hero ...etc``처럼 다른 위치에 토큰을 추가하세요.
• 표준 리파이너 또는 1.0-0.9 리파이너를 사용하세요. https://huggingface.co/stabilityai/stable-diffusion-xl-refiner-1.0/blob/main/sd_xl_refiner_1.0_0.9vae.safetensors
• ComfyUI를 사용하세요.

제작 과정

우리는 700장의 이미지로 구성된 소규모 데이터셋을 사용하여 20에포크 동안 14,000단계를 학습했습니다. 모든 이미지에 최대한 상세한 캡션을 수작업으로 달았습니다. 결과적으로 SDXL은 학습에 매우 민감하다는 것이 밝혀졌습니다. 우리가 이룬 변화는 정말 흥미롭습니다. SDXL의 미래는 밝습니다!

향후 계획

우리는 생성 과정을 더 간편하게 만드는 것을 목표로 하고 있습니다. 이를 위해 플랫폼에 ComfyUI를 도입하여 메타데이터가 포함된 이미지를 단일 클릭으로 생성할 수 있게 할 예정입니다. 이는 워크플로우 공유의 미래이며, 이 기능을 우리 플랫폼에 구현하는 데 도움을 준 /u/comfyanonymous에게 진심으로 감사드립니다. 또한, /u/Searge가 수행한 놀라운 SeargeSDXL 작업에도 특별한 감사의 말을 전합니다. 우리는 이 워크플로우를 정말 좋아합니다! (Civitai.com에서 생성 데이터를 사용할 수 있도록 협업할 수 있을까요?)

우리는 받은 피드백을 바탕으로 이 모델을 계속 개선해 나갈 예정입니다. 몇 주 내에 정식 버전이 출시될 예정이니 기대해주세요!