Text2Image with Inpaint, Face Detailer, Upscaler and optional Text2Video

크레딧: YouTube의 shikasensei(Ultra Upscale 1.5) 및 ControlAltAI의 얼굴 세부 표현 설명에 감사합니다.

이 워크플로우는 초보자가 고품질 텍스트에서 이미지로 생성하는 데 사용할 수 있으며, SD 1.5를 사용할 경우 옵션으로 텍스트에서 영상 또는 이미지에서 영상으로 생성할 수 있습니다.

SD 1.5 버전은 잠시 작업하지 않았으나 곧 다시 시작하겠습니다.

현재 저는 ComfyUI를 사용하여 여러 LoRA를 적용해 SDXL 모델 체크포인트 두 개를 병합하는 작업을 진행 중입니다.

다시 강조하지만, 저는 단지 초보자일 뿐이고 배우는 것이 매우 즐겁습니다. 따라서 이 워크플로우는 초보자에게 비교적 친숙할 것입니다.

언제나처럼, 업스케일러는 버전에 관계없이 시간이 다소 걸립니다. 업스케일링 정도를 줄이고 싶다면 설정을 조정해 주세요. 어떻게 조정해야 하는지에 대한 정보는 shikasensei가 업스케일러에 표기한 내용을 기반으로 하며, 제가 SDXL 버전 워크플로우에서 사용하는 병합 노드 이름으로 수정했습니다.

추가 LoRA를 쉽게 테스트할 수 있도록 여러 옵션이 준비되어 있습니다. 항상 LoRA 목록을 확인하여 강도(스트렝스)를 적절히 조정해 주세요. 강도가 다소 다르면 최종 이미지에 큰 변화가 생길 수 있습니다.

운영에 관한 많은 참고 사항이 포함되어 있으며, 여전히 NSFW 콘텐츠가 생성될 수 있습니다. 언제나와 같이 유사한 모델 체크포인트를 사용해 주세요. 애니메이션과 리얼리즘을 혼합하는 등 잘못된 조합은 결과가 심각하게 왜곡될 수 있습니다.

---

SDXL 참고 사항:
- 현재는 테스트용으로 매우 간단한 프롬프트만 사용하고 있습니다. dpmp 2m sde w/ karras를 사용해 여러 개의 병합된 SDXL 체크포인트로 꽤 좋은 결과를 얻을 수 있었습니다. 샘플러와 스케줄러는 언제든지 변경할 수 있지만, 결과에 큰 영향을 미칩니다.

- 네거티브 프롬프트 내 임베딩이 작동하지 않는다는 것을 인지하고 있습니다. 하지만 이 임베딩은 SD 1.5와 SDXL을 병합할 때 사용하기 위한 것으로, 가끔 매우 잘 작동합니다. 더 많은 스텝과 CFG가 필요할 수 있으나, 우수한 결과를 얻을 수 있습니다. 일부 병합된 체크포인트에서는 최대 150스텝 × CFG 20까지 시도해 좋은 결과를 얻었습니다.

- 자원 절약을 위해 얼굴 편집 단계에서 추가 모델 로드를 제거했습니다. SDXL을 사용하면서 업스케일러에 다른 체크포인트를 더 로드해 원하는 스타일로 최종화하는 방식입니다. VAE 로드는 선택 사항이며, 포함된 체크포인트 중 하나가 마음에 들지 않거나 필요할 경우 사용할 수 있습니다. 렌더러 LoRA나 기타 필요한 경우를 위해 선택적 LoraLoaderModelOnly 노드도 제공됩니다. LoRA 스택은 포즈/디테일 등에 사용됩니다.

대부분의 누락된 노드는 ComfyUI Manager의 '누락된 노드 설치' 또는 '사용자 정의 노드 설치' 옵션으로 설치할 수 있습니다. 모델도 마찬가지입니다. 스타일러는 수동으로 검색해야만 나타나며, 이는 SDXL ComfyUI 스타일러입니다.

****각 워크플로우에서 필요한 체크포인트, LoRA, VAE를 확인하거나 자신에게 가장 적합한 것을 사용해 주세요. 이 워크플로우는 ComfyUI에서 SDXL 또는 SD 1.5 모델을 병합하기 위한 테스트입니다.****