SimpleText2Draw2Real
세부 정보
파일 다운로드
모델 설명
이것은 프롬프트를 입력받아 IL 체크포인트를 기반으로 여러 이미지를 생성하는 간단한 워크플로우입니다. 생성된 이미지 중 원하는 것을 선택하면 다음 단계인 리얼리즘 필터로 이동할 수 있습니다. 리얼리즘 버전이 생성되면 비교기에서 해당 이미지를 표시하며, 만족한다면 워크플로우를 계속 진행하면 더 많은 리얼리즘 디테일을 추가하여 이미지를 정제합니다. 결과는 매우 우수하며, 이 워크플로우는 일반적으로 리얼리즘 체크포인트에서는 제공하지 않지만 애니메이션 또는 일러스트레이션 기반 체크포인트에서는 가능한 포즈나 장면을 생성하기 위해 만들었습니다. 이를 통해 일반적인 리얼리즘 체크포인트에서는 얻기 어려운 특정 포즈의 이미지를 쉽게 생성할 수 있습니다.
워크플로우는 아래에 설명하는 색상 그룹으로 구성되어 있습니다.
🟢 녹색 그룹: 핵심 프롬프트 및 생성
이 그룹은 워크플로우가 작동하기 위해 반드시 필요한 유일한 그룹입니다. 긍정 및 부정 프롬프트를 간단히 입력하면 워크플로우가 이미지를 생성합니다.
- 프롬프트 입력: 원하는 이미지를 설명하는 텍스트 박스(긍정 프롬프트)와 피하고 싶은 요소를 설명하는 텍스트 박스(부정 프롬프트)를 사용하세요.
🔵 파란색 그룹: 선택적 설정
이 그룹은 생성 과정을 세밀하게 조정하기 위한 것입니다. 이미지에 특정 변경을 원할 경우 이 설정을 조정하세요.
- 해상도 및 이미지 수: 생성할 이미지의 너비, 높이 및 동시에 생성할 이미지 수를 설정하세요.
🟠 주황/갈색 그룹: 변수 관리
이 그룹은 워크플로우 전체에서 프롬프트, 모델, 이미지 등의 정보를 올바르게 전달하기 위해 변수를 생성하고 관리합니다.
🟡 노란색 그룹: 핵심 프로세스
이 그룹은 워크플로우의 중심으로, 마법이 일어나는 부분입니다. 프로세스는 네 가지 주요 단계로 나뉩니다:
텍스트-이미지 생성: 워크플로우는 애니메이션 또는 일러스트레이션 중심 체크포인트를 사용해 텍스트 프롬프트를 기반으로 이미지를 생성합니다.
리얼리티 필터: 이 단계는 초기 생성된 잠재 이미지를 가져와 리얼리즘 필터를 적용합니다. 이 과정에서 애니메이션/드로잉에서 실제 생활 스타일로 전환됩니다.
리얼리티 필터 강화: 이 단계에서는 전용 강화 모델과 추가 프롬프트를 사용해 이미지의 리얼리즘을 더 향상시킵니다.
눈 세부 개선 및 고해상도 확대: 이 최종 단계는 눈의 디테일을 개선하고 전체 이미지를 고해상도로 확대하는 데 필수적입니다.
🔴 빨간색 그룹: 미리보기 및 비교기
이 그룹은 생성 과정 전반에 시각적 피드백을 제공하여 워크플로우를 모니터링하고 조정할 수 있도록 도와줍니다.
이미지 비교 1: 이 미리보기는 원본 애니메이션/드로잉 이미지와 리얼리티 필터가 적용된 이미지를 비교합니다. 리얼리즘 변환에 만족하지 못한다면, 이 단계에서 워크플로우를 중단하고 파란색 그룹의 노이즈 제거 파라미터를 조정할 수 있습니다.
이미지 비교 2: 이 두 번째 비교기는 첫 번째 생성된 리얼 이미지와 강화 필터를 거친 이미지를 비교합니다. 이를 통해 강화 단계의 영향을 확인할 수 있습니다.
🟣 보라색 그룹: 모델 로딩
이 그룹은 워크플로우에 필요한 모든 모델을 로드하여 주 프로세스 흐름과 분리하여 조직화합니다. 제공된 모델은 좋은 시작점이지만, 원하는 체크포인트를 자유롭게 사용할 수 있습니다. 선택한 모델에 맞게 ksampler 및 denoise 값을 조정하는 것을 잊지 마세요.
⚫️ 검은색 그룹: 최종 출력
이곳에 최종 고해상도 이미지가 저장됩니다. 워크플로우가 완료되면 최종 결과는 이 섹션에서 확인할 수 있습니다.
원하는 체크포인트를 자유롭게 사용하세요. 이 워크플로우의 핵심 아이디어는 상상력이나 스타일리시한 이미지를 생성할 수 있는 체크포인트를 리얼리즘 필터를 통해 통과시키는 것입니다. 그러나 모든 샘플링 방법이나 스케줄러가 모든 체크포인트에 동일하게 작동하는 것은 아니므로, 사용하는 모델에 맞게 K-Sampler 매개변수를 조정하는 것을 잊지 마세요.
저와 동일한 모델을 사용하고 싶다면 다음과 같습니다: