Stable Diffusion 1.5 및 2.1용 QR 코드 조건부 ControlNet 모델

모델 설명

이 ControlNet 모델은 150,000쌍의 QR 코드 + QR 코드 아트워크 데이터셋으로 학습되었습니다. 이 모델들은 QR 코드의 핵심 형태를 유지하면서도 미적으로 매력적인 QR 코드 기반 아트워크를 생성하는 데 안정적인 기반을 제공합니다.

Stable Diffusion 2.1 버전은 특정 요구 사항을 해결하기 위해 개발된 관계로 약간 더 효과적입니다. 그러나 기존 버전을 사용하는 사용자를 위해 동일한 데이터셋으로 1.5 버전 모델도 학습되었습니다.

성능 및 한계

이 모델들은 대부분의 경우 우수한 성능을 보이지만, 100% 정확하지 않음을 유의하세요. 일부 경우 QR 코드 형태가 기대한 대로 나타나지 않을 수 있습니다. QR 코드 형태를 강조하려면 ControlNet 가중치를 높일 수 있습니다. 그러나 이는 출력물의 스타일에 부정적 영향을 줄 수 있으므로 주의하세요.**스캔 최적화를 위해 QR 코드를 보정 모드 'H'(30%)로 생성하세요.**

스타일과 형태를 균형 있게 조정하려면 입력과 원하는 출력, 그리고 적절한 프롬프트에 따라 ControlNet 가중치를 미세 조정해야 할 수 있습니다. 일부 프롬프트는 가중치를 크게 높이지 않으면 작동하지 않습니다. 이 요소들 사이의 최적의 균형을 찾는 과정은 예술적 감각과 과학적 접근이 결합된 작업입니다. 최상의 결과를 얻으려면 768 해상도로 아트워크를 생성하는 것이 권장됩니다. 이는 최종 제품의 세부 사항을 더 높은 수준으로 구현하여 QR 코드 기반 아트워크의 품질과 효과를 향상시킵니다.

설치

가장 간단한 사용 방법은 .safetensors 모델 파일과 해당 .yaml 구성 파일을 사용 중인 애플리케이션의 ControlNet 모델이 설치된 폴더에 위치시키는 것입니다. 이 폴더 위치는 애플리케이션마다 다를 수 있습니다.

auto1111에서 사용하려면 해당 파일을 webui/models/ControlNet 폴더에 배치하세요. ControlNet 웹UI 확장 프로그램을 통해 로드할 수 있으며, 이 확장 프로그램은 웹UI의 확장 탭을 통해 설치할 수 있습니다(https://github.com/Mikubill/sd-webui-controlnet). ControlNet 유닛을 활성화하고 입력 이미지를 QR 코드로 설정하세요. 기본 스테이블 디퓨전 모델에 따라 모델을 SD2.1 또는 1.5 버전 중 하나로 설정해야 하며, 그렇지 않으면 오류가 발생합니다. 사전 처리기는 필요하지 않지만, 다른 결과 변형을 원한다면 반전(invert) 사전 처리기를 사용할 수 있습니다. 세부 사항을 더 잘 표현하기 위해 생성 시 768 해상도를 권장합니다.

문제가 발생하면 ControlNet 사용법에 대한 추가 정보를 확인하세요. 웹UI를 실행한 후 ControlNet 확장을 설치하는 것은 매우 간단합니다.