PonyFlow - [Pony/Illustrious/SDXL] [Txt2Img/Controlnet Depth/Style IPAdapter]

세부 정보

파일 다운로드

모델 설명

PonyFlow

Pony, Illustrious, SDXL와 호환됩니다!

이 워크플로우 페이지에 생성된 이미지를 게시해주세요!

당신의 창작물을 보고 싶습니다! 불행히도 저는 이 워크플로우를 자동으로 리소스로 태그할 수 없습니다. 사용한 체크포인트와 LoRA는 자동으로 태그되어 모델의 이미지 갤러리에 표시됩니다!

참고: HIGHRESFIX 노드에 대한 설치 지침을 꼭 읽어주세요. 이 워크플로우를 처음 로드할 때는 작동하지 않습니다.

이 워크플로우는 Pony와 SDXL을 위한 고화질, 독창적인 이미지를 생성하는 데 초점을 맞췄습니다.

이것은 제가 StableDiffusion을 사용하며 한 해 동안 구축해온 개인 워크플로우 및 와일드카드 파일입니다!

전시 이미지는 지난해 이 워크플로우의 다양한 버전을 사용해 생성한 저의 가장 좋아하는 결과물들입니다.

다음이 포함되어 있습니다:

  • README.md — 설치 지침, 모델 다운로드 위치 및 사용 팁이 가득한 파일
  • ponyflow_wildcards.yaml — 와일드카드 파일
  • ponyflow_v1_workflow.json — ComfyUI에 로드할 워크플로우 파일

질문이 있으시면 아래 댓글로 알려주세요!

V3 변경 사항:

  • HiRes Fix 노드를 제거하고, 유사하거나 더 나은 결과를 제공하는 img2img 업스케일러를 추가하여 이 워크플로우를 간소화했습니다.

V2 변경 사항:

  • 일반적으로 묻는 질문에 대한 답변을 워크플로우 내에 프롬프트/와일드카드/CFG/사용 노트를 추가했습니다.
  • 스타일을 빠르게 반복하기 위해 HighResFix/업스케일링을 완전히 비활성화할 수 있습니다.
  • 샘플 불일치 문제 제거
  • 처음 로드할 때 HighResFix가 작동하지 않는 문제를 해결했을 것입니다 🤞

README 복사본:

## 설치

ComfyUI 설치: https://github.com/comfyanonymous/ComfyUI

ComfyUI Manager 설치: https://github.com/ltdrdata/ComfyUI-Manager

  • ComfyUI를 열고
  • 워크플로우를 로드하고
  • Manager > 누락된 사용자 정의 노드 설치
    • 누락된 모든 노드를 설치하세요 (저는 모든 항목에 nightly 버전을 사용합니다)
  • ComfyUI를 재시작하고
  • 아래에 나열된 모든 모델을 적절한 위치에 설치하세요
  • ponyflow_wildcards.yaml 와일드카드 파일을 ComfyUI\custom_nodes\comfyui-impact-pack\wildcards 디렉토리에 복사하세요
  • ComfyUI를 재시작하세요

초기 실행 시 HighRes-Fix 스크립트 노드에서 오류가 발생할 수 있습니다. 이를 해결하려면, 새로운 노드 버전을 생성하고 매개변수가 동일한지 확인한 후, 새 노드를 KSampler 노드에 다시 연결하고 기존 노드를 삭제하세요. 또한 "use_same_seed"도 비활성화하세요. 왜 이런 문제가 발생하는지는 모르겠지만, 처음 로드할 때 항상 발생합니다...

## 모델 다운로드

체크포인트

ComfyUI\models\checkpoints에 설치

모든 Pony 모델이 작동합니다. CyberRealistic Pony는 바로 사용 가능한 가장 인기 있는 모델 중 하나입니다.

/model/443821/cyberrealistic-pony?modelVersionId=1346181

Controlnet

ComfyUI\models\controlnet에 설치 (제 경우는 controlnet_union_promax.safetensors로 이름을 변경했습니다)

https://huggingface.co/xinsir/controlnet-union-sdxl-1.0/blob/main/diffusion_pytorch_model_promax.safetensors

Depth Anything

Depth Anything V2 - Relative 노드는 필요한 모델을 자동으로 다운로드 및 설치합니다.

업스케일 모델

ComfyUI\models\upscale_models에 설치

/model/147759/remacri

LoRA

ComfyUI\models\loras에 설치

https://huggingface.co/tianweiy/DMD2/blob/main/dmd2_sdxl_4step_lora.safetensors

https://huggingface.co/tianweiy/DMD2/blob/main/dmd2_sdxl_4step_lora_fp16.safetensors

CLIP-ViT-H-14-laion2B-s32B-b79K

ComfyUI\models\clip_vision에 설치

https://huggingface.co/laion/CLIP-ViT-H-14-laion2B-s32B-b79K/blob/main/model.safetensors

IPAdapter ip-adapter-plus_sdxl_vit-h

ComfyUI\models\ipadapter에 설치 (이 폴더는 수동으로 생성해야 합니다)

https://huggingface.co/h94/IP-Adapter/blob/main/sdxl_models/ip-adapter-plus_sdxl_vit-h.safetensors

## 사용법

이 워크플로우는 Pony와 SDXL을 위한 고화질, 독창적인 이미지를 생성하는 데 초점을 맞췄습니다.

모든 기능은 Fast Groups Bypasser (rgthree) 노드로 제어됩니다. 기능 이름은 워크플로우 내의 이름 지정된 그룹과 일치합니다. 하나를 비활성화하면 해당 그룹 전체가 우회됩니다.

일반적인 text2img 작업 시 저는 다음을 사용합니다:

  • Enable Initial Gen
  • Enable Highres
  • Enable Film Grain

스케줄러/업스케일링 설정을 조정하여 차이를 확인하려면 미리보기를 켜고 끄세요.

Skimmed CFG

https://github.com/Extraltodeus/Skimmed_CFG

많은 사람들이 제 이미지가 어떻게 만들어졌는지 묻습니다. 이 노드 때문에 복제하기 어렵습니다. Skimmed CFG는 CFG 값과 프롬프트 가중치(예: photorealistic:1.5)를 높일 수 있게 해줍니다. Skimmed CFG를 3/5/7로 설정하면서 CFG를 5/12/24/48로 시도해보세요.

이를 통해 프롬프트에 더 높은 가중치를 부여하고 독특한 스타일을 개발할 수 있습니다. 예: 다음 프롬프트에 (abstract minimal art:1.9)를 추가해보세요!

기준값으로는 Skimmed CFG를 5.0, CFG를 12로 설정하는 것을 추천합니다. 그러나 각 모델마다 결과가 크게 달라지므로, 반드시 테스트해보세요.

ImpactWildcardEncode

긍정 및 부정 프롬프트 입력은 와일드카드 인코더입니다. 이들은 포함된 YAML 파일을 새로운 독특한 프롬프트로 처리합니다! 이는 장면, 인물 또는 전체 프롬프트의 일부를 변경할 수 있게 해줍니다. 기본 예시는 제 일반적인 워크플로우를 보여줍니다.

무작위 인물을 선택하고, 무작위 신체 크기를 부여하며, 무작위 장면에 배치하세요. 더 자세하거나 덜 자세하게 지정하거나, 와일드카드를 전혀 사용하지 않아도 됩니다!

ponyflow_wildcards.yaml 파일에는 와일드카드 사용법에 대한 많은 예제가 포함되어 있습니다.

와일드카드에 대한 자세한 정보는 다음 가이드를 참조하세요: https://github.com/ltdrdata/ComfyUI-extension-tutorials/blob/Main/ComfyUI-Impact-Pack/tutorial/ImpactWildcard.md

와일드카드를 수정한 후에는 ComfyUI 메뉴에서 편집 > Impact: 와일드카드 새로 고침을 통해 새로 고치세요.

와일드카드 사용에서 배운 교훈에 관한 전체 기사를 작성해야 할 것 같습니다...

Film Grain

이 워크플로우에 포함된 포스트 프로세싱 필름 그레인 노드를 사용하여 사실적인 이미지를 만드는 것을 선호합니다. 스케일, 강도, 채도 값을 원하는 대로 조정해보세요.

Controlnet Depth

로드 Controlnet 이미지 노드에 이미지를 업로드하여 이를 이미지 템플릿으로 사용하세요. 이는 입력 이미지의 "모양"을 기반으로 출력을 조정합니다. "Depth Sample" 노드를 활성화하여 이미지의 영향을 확인하세요.

스타일 전이

"Load Style Image" 노드에 이미지를 업로드하여 색상 체계와 예술적 특성을 복사하세요.

"weight_style" 및 "end_at" 매개변수를 조정하여 전이된 스타일의 강도를 조정하세요. 기본적으로 저는 둘 모두 0.5로 설정하는 것을 선호하지만, 각 스타일 이미지에 따라 조정이 필요합니다.

추가 VAE

사용하는 모델이 자체 VAE를 포함하지 않을 경우를 대비해 추가 "Load VAE" 노드를 포함했습니다. 표준 SDXL VAE 또는 CivitAI에서 제공하는 다양한 VAE를 사용할 수 있습니다.

이 모델로 만든 이미지

이미지를 찾을 수 없습니다.