NoobAI Inpainting ControlNet

NoobAI용 Inpainting 모델

NoobAI Eps 1.0 기반으로 학습되었으며, 테스트를 통해 NoobAI를 기본으로 하는 시리즈 모델(EPS 및 V 버전, 심지어 Illustrious 기반 모델 포함)에서 정상적으로 작동함이 확인되었습니다.

모델을 models/controlnet 폴더에 넣고, ComfyUI에서 이미지 노드를 로드한 후 마스크 영역을 그려서, inpaint 전처리기를 사용하여 마스크 영역을 순수 검정색으로 채운 후 condition image로 ControlNet에 입력하면 인페인팅(inpaint)이 가능합니다.

마스크를 이미지 경계에 그릴 경우 아웃페인팅(outpaint)이 가능합니다.

현재는 ComfyUI만 지원하며, WebUI에서는 마스크 영역이 자동으로 흰색으로 채워져 모델이 순수 검정색을 요구하는 것과 충돌합니다. 향후 WebUI 플러그인 개발을 고려 중입니다.

2025.5.11 업데이트: WebUI 플러그인 지원 완료

https://github.com/Wenaka2004/sd-webui-controlnet-wenaka

이것은 제가 수정한 ControlNet 플러그인으로, WebUI 인터페이스에서 정상적으로 사용 가능합니다(기존 ControlNet과 동시에 활성화할 수 없으므로 원본을 삭제하거나 비활성화해 주세요).

https://github.com/spawner1145/stable-diffusion-webui-forge.git

이 버전의 Forge WebUI도 이 모델을 사용할 수 있습니다.

감사 인사: 110k개의 고품질 데이터셋과 2개의 H100 컴퓨팅 자원을 제공해 주신 @이치고^진우님!
NoobAI XL 학습을 담당하신 @Laxhar님

학습을 위한 스크립트를 제공해 주신 @euge님