Difference ControlNets

원본 ControlNet 차이 모델 HuggingFace 저장소

정지! 이 모델들은 프롬프트 입력이나 이미지 생성용이 아니며, 스테이블 디퓨전 1.5 기반 모델(설정이 SD 2.X가 아닌 한 대부분의 모델)을 위한 컨트롤 네트워크로 사용되며, 사용 시 주의해 주세요. /model/9251/controlnet-pre-trained-models에 공유된 모델들은 기본 SD 1.5 모델 전용 ControlNet이며, 차이 모델이 아닙니다.

컨트롤 네트워크는 기존 이미지를 기반으로 구조를 안내하거나, 특정 컨트롤 네트워크에 맞는 형식의 이미지를 사용하여 이미지 생성을 제어할 수 있습니다. ControlNet과 다양한 유형에 대한 자세한 정보는 https://github.com/lllyasviel/ControlNet를 참고하세요.

모든 예시 이미지는 전처리기(모듈)를 사용하여 생성되었으며, AbyssOrangeMix2 - Hardcore 모델을 기반으로, 임의로 설정된 시드값을 제외하고 원본 입력 이미지와 동일한 프롬프트를 사용했습니다. 컨트롤 네트워크 유형별로 별도로 언급되지 않은 경우 모든 설정은 기본값을 유지하였습니다. 캔버스 크기는 입력 이미지와 일치하도록 512 x 768으로 설정되었습니다.

사용하고자 하는 모델만 다운로드하면 되며, 모든 모델을 함께 다운로드할 필요는 없습니다.

이 모델들은 ControlNet 확장 프로그램을 사용하기 위해 필요하며, Safetensor 형식으로 변환하고 ControlNet 신경망만 추출하여 "날것" 형태로 최적화하였습니다. 저는 AOM2와 함께 테스트한 결과 정상 동작함을 확인했습니다. 이 모델을 다운로드하여 \stable-diffusion-webui\extensions\sd-webui-controlnet\models 디렉토리에 저장하세요.

다이어그램은 Kohya가 공유한 것으로, 원본 ControlNet 모델과 차이 모델 간의 차이를 시각적으로 설명하려는 시도입니다.