Jurdn's Model Sculptor for ComfyUI
세부 정보
파일 다운로드
모델 설명
ComfyUI - Jurdns 모델 조각가
다양한 레이어와 블록에 기반한 그래디언트 기반 수정을 통해 확산 모델을 "조각"하는 ComfyUI 노드 모음입니다. 수학적 곡선과 형태를 적용하여 독특한 예술적 효과를 생성하거나, 업스케일링 중 세부 사항을 강화하거나, 창의적인 모델 변형을 실험해보세요.
이것은 무엇을 하나요?
두 모델을 혼합하는 전통적인 모델 병합과 달리, 모델 조각가는 단일 모델의 레이어에 수학적 그래디언트 형태를 적용합니다. 모델의 "깊이"에 곡선이나 파동 패턴을 적용하는 것처럼 생각해보세요. 이는 일부 레이어를 더 강하게, 다른 레이어는 약하게 만들어 네트워크 전반에 걸쳐 영향의 봉우리와 계곡을 생성합니다. 효과적인 세부 사항 강화를 위해 주로 세부 조정 또는 업스케일링 단계에서 사용하는 것이 좋습니다.
사용 사례
🔍 반복적 업스케일링 및 세부 조정
업스케일링 워크플로우에서 모델 조각가를 사용하여 세부 정보 복원을 향상시키세요. 다른 업스케일링 단계에서 다양한 그래디언트 형태를 적용해 미세한 세부 사항, 텍스처 또는 특정 예술적 요소를 끌어내세요.
🎨 창의적인 모델 병합 프로세스
전통적인 병합 대신, 모델 조각가를 병합 전 사전 처리 단계로 사용하거나, 병합된 모델에 적용하여 기존 혼합 방식으로는 달성할 수 없는 독특한 변형을 만들어보세요.
⚡ 동적 워크플로우 강화
동일한 기본 모델을 특정 작업(예: 초상화 대 풍경, 세부적 대 스타일리시 등)에 따라 다르게 작동시키고 싶을 때 기존 워크플로우에 통합하세요.
설치
ComfyUI 사용자 정의 노드 디렉토리로 이동:
cd ComfyUI/custom_nodes/이 저장소를 클론:
git clone https://github.com/jurdnf/ComfyUI-JurdnsModelSculptor.git
ComfyUI Manager에서도 확인할 수 있습니다.
이 게시물에는 .zip 아카이브도 포함되어 있으며, 이를 직접 comfyui/custom_nodes에 추출할 수 있습니다.
- ComfyUI를 재시작하세요.
노드는 노드 브라우저의 models/advanced 아래에 나타납니다.
사용 가능한 노드
Jurdn's Model Sculptor (Flux) - Flux.1 모델용
Jurdn's Model Sculptor (SDXL) - SDXL 모델용
Jurdn's Model Sculptor (SD3) - Stable Diffusion 3 모델용
위 아키텍처의 세부 조정 버전 (예: Illustrious는 SDXL 기반)
사용 방법
모델 연결 - "Load Diffusion Model"에서 직접 모델 조각가 노드로 연결하세요.
그래디언트 형태 선택 - 레이어에 걸쳐 효과가 어떻게 변화할지 정의하는 형태를 선택하세요.
강도 설정 - 일반적으로 미세한 효과는 0.05–0.3, 극적인 변화는 더 높게 설정하세요.
대상 블록 선택 - 모델의 특정 부분에 효과를 집중시키세요.
출력 연결 - 기존처럼 샘플러로 연결하세요.
중요: 누적 효과를 방지하려면 항상 모델 로더에서 직접 연결하세요.
그래디언트 형태 설명
각 형태는 모델의 레이어에 걸쳐 다른 영향 곡선을 생성합니다:
선형 (상승/하강) - 점진적인 증가 또는 감소
이즈 인/아웃 (이차) - 부드러운 가속/감속 곡선
이즈 인/아웃 (사인) - 자연스럽고 부드러운 파동 전환
스파이크 (가우시안) - 중간 레이어에 예리한 봉우리
딥 (역가우시안) - 중간에 계곡, 가장자리에 집중
스텝 - 레이어 간 이산적 수준 변화
랜덤 (노이즈) - 실험적 효과를 위한 예측 불가능한 변화
대상 블록
Flux 모델
in_layers - 입력 처리 레이어
double_blocks - 주요 트랜스포머 블록 (0-18)
single_blocks - 보조 트랜스포머 블록 (0-37)
Double & Single (동기화된 형태) - 두 블록 유형에 동일한 그래디언트 적용
SDXL 모델
input_blocks - 다운샘플링 경로 (0-11)
middle_block - 병목 처리
output_blocks - 업샘플링 경로 (0-11)
time_embed - 타임스텝 임베딩
label_emb - 클래스/스타일 임베딩
Input & Output (동기화된 형태) - 대칭적 적용
SD3 모델
joint_blocks - 주요 DiT 트랜스포머 블록 (0-23)
x_embedder - 이미지 임베딩 레이어
y_embedder - 텍스트 임베딩 레이어
t_embedder - 타임 임베딩 레이어
pos_embed - 위치 임베딩
final_layer - 출력 투영
Joint & Final (동기화된 형태) - 핵심 처리에 집중
팁 및 최선의 실습
부드럽게 시작 - 강도를 0.1 정도로 시작한 후 조정하세요.
조합 실험 - 다양한 형태는 다양한 콘텐츠에 더 잘 맞습니다.
업스케일링에서 사용 - 다단계 업스케일링 워크플로우에서 특히 효과적입니다.
직접 연결 - 누적 효과를 피하려면 항상 "Load Diffusion Model"에서 직접 연결하세요.
다른 블록 시도 - 각 블록 유형은 생성의 다른 측면에 영향을 미칩니다.