Character Maker

전체 문서 보기

Character Maker를 사용하여 Stable Diffusion에서 일관된 캐릭터를 생성하세요. 이 애니메이터와 스토리텔러를 위한 필수 도구는 캐릭터의 포괄적인 시점을 생성하여 애니메이션 제작 또는 귀하의 오리지널 캐릭터를 위한 LoRA 모델 학습용 데이터셋 구축을 용이하게 합니다.

Character Maker는 하나의 이미지에서 애니메이션에 가장 흔한 세 가지 포즈(t-pose, 뒷면, 측면 프로필)를 포함한 전체 캐릭터 시트를 생성하거나, 시드를 고정하고 각 시점에 대해 개별적으로 프롬프트를 설정할 수 있습니다.

이 도구의 기원에 대해 더 알아보려면 다음 영상을 시청하세요: 애니메이션을 위한 AI 캐릭터 디자인

Everly Heights Character Maker – 모든 각도가 이야기를 전합니다.

튜토리얼:

EVERLY HEIGHTS CHARACTER MAKER 기능

- 다중 각도 간편 생성: 귀하의 캐릭터를 뛰어난 정확도로 다양한 포즈로 캡처하세요. 애니메이션 또는 정적 아트를 설계하든, "t-pose", "Side profile", "back side"와 같은 특수 키워드를 사용하면 시드를 고정할 때 선명하고 정확히 배치된 캐릭터 이미지를 생성할 수 있습니다. 이는 모든 창작 프로젝트에서 일관된 품질과 정렬을 보장하며, Everly Heights Character Maker를 귀하의 예술 도구 세트에 필수적인 요소로 만듭니다. - 역동적인 캐릭터 시트: "4view" 키워드를 사용하여 애니메이션 일관성을 보장하기 위한 상세한 캐릭터 시트를 생성하세요. - LoRA를 통한 스타일 적응: Character Maker LoRA는 낮은 강도로 작동하므로, Everly Heights 스타일을 조절하여 귀하의 고유한 스타일에 맞추면서도 기능을 유지할 수 있습니다. - 일관된 캐릭터 엔진: Character Maker는 일관성이 뛰어납니다. 시드를 고정하면 캐릭터의 정체성을 해치지 않고 각 시점을 쉽게 전환할 수 있습니다. 프롬프트를 미세하게 수정함으로써 캐릭터의 감정까지 변경할 수 있습니다. 이 혁신적인 기능은 캐릭터가 모든 각도와 감정에서 귀하의 비전에 충실하게 유지되도록 합니다. - 데이터셋 생성기: Character Maker 출력물을 사용하여 LoRA 모델 학습용 풍부하고 다양한 데이터셋을 생성하세요. 줌 레벨, 크롭, 배경을 혼합하여 캐릭터의 20~50장의 이미지를 만들어보세요. Mr. Matheson XL과 Infinite Tina XL은 모두 이 방법으로 학습되었습니다. - ControlNet 기반 포즈 일관성: 아래의 ControlNet OpenPose 템플릿을 사용하여 생성하는 모든 캐릭터에 동일한 포즈를 적용하세요. 이는 다중 캐릭터 장면을 애니메이션할 때 필수적입니다. 각 캐릭터는 동일한 기본 이미지 세트를 갖게 되며, inpainting이나 미세한 수정(예: '슬픈 클로운' 대신 '미친 클로운')으로 다시 프롬프트하여 확장할 수 있습니다.

트리거 단어

t-pose - 앞쪽을 향하고 팔을 벌린 상태.
Side profile - 캐릭터가 1/4 방향 또는 90도로 서 있는 상태.
back side - 뒤에서 촬영한 모습.
4view - 세 가지 각도에 추가로 보너스 측면 프로필을 포함.
Character sheet - 선택 사항. Stable Diffusion의 기존 캐릭터 시트 지식을 활용.
in front of a green screen - 항상 밝고 단일한 녹색 배경을 확보합니다. 그렇지 않으면 배경 색상은 캐릭터 색상과 대비되는 임의의 색상이 됩니다. 이 표현은 배경을 더 깔끔하게 만드는 데 도움이 됩니다.

지침

Everly Heights Character Maker는 세 가지 포즈와 캐릭터 시트 생성기를 내장하고 있습니다.

개별 포즈

특정 포즈를 프롬프트하려면 t-pose, Side profile, 또는 back side 키워드 중 하나를 사용하세요. 해상도 1024x1024를 사용하는 것을 권장합니다. 다른 종횡비도 작동하지만 캐릭터의 일부가 잘릴 수 있습니다.

기본 프롬프트를 작성하고 다양한 시드로 사용하여 원하는 결과를 찾으세요. 시드를 고정한 후 키워드를 변경하여 캐릭터의 다른 시점을 얻으세요. 아래는 동일한 시드로 생성된 십대 마녀 예시입니다:

캐릭터 시트

네 가지 포즈를 포함한 캐릭터 시트를 생성하려면 4view 키워드를 사용하세요. 키워드를 사용하면 네 개 이상의 시점이 생성되거나 일부 시점이 반복될 수 있습니다. 키워드를 생략하고 1344x768 해상도로 렌더링하면 일반적으로 최소 3개의 유용한 시점을 얻을 수 있습니다. 그러나 동일한 시점의 여러 버전은 유용할 수 있으며, 후처리에서 여러 버전을 조합할 수 있습니다.

저는 모델을 1344x768 해상도로 학습했기 때문에 이 해상도를 권장하지만, 다른 해상도도 우수한 결과를 제공합니다. 프롬프트에 "character sheet"라는 단어를 추가하면 SDXL이 이미 알고 있는 캐릭터 시트 정보를 활용하여 결과를 더욱 향상시킬 수 있습니다.

OpenPose ControlNet을 사용한 캐릭터 시트

단순한 프롬프트만으로도 유용한 결과를 얻을 수 있지만, 애니메이션 프로젝트에 여러 캐릭터가 포함되어 있다면 캐릭터 라이깅과 애니메이션을 위한 일관된 워크플로우가 필요합니다. 아래의 ControlNet OpenPose 템플릿을 사용하여 캐릭터의 포즈를 고정하세요. 이 템플릿은 학습 이미지 생성에 사용되었기 때문에 모델이 이 템플릿과 매우 일관되게 작동합니다. 일부 시드/해상도에서는 4view 키워드만으로 유사한 결과를 얻을 수 있지만, 결과가 불안정할 수 있습니다.

ControlNet을 사용하여 캐릭터의 일관성을 높이면서도 4view 키워드를 여전히 사용할 수 있습니다(예: 4view, an evil clown). 복잡한 프롬프트의 경우 ControlNet 가중치를 1.05–1.2로 증가시키면 결과가 개선될 수 있습니다. 생성이 완료되기 전에 ControlNet 모델을 중단하여 모델이 정리할 시간을 주는 것을 권장합니다. 제가 사용하는 설정은 다음과 같습니다:

[caption id="attachment_1658" align="aligncenter" width="508"] Everly Heights Character Maker를 위한 ControlNet 설정[/caption]

ADetailer/Inpainting/Hires fix

개별 1024x1024 포즈는 얼굴, 손 등 세부 사항이 뚜렷하게 생성됩니다. Hires fix를 사용하여 이미지를 img2img 업스케일 프로세스로 통과시킨 후 저장하면 품질을 더욱 향상시킬 수 있습니다. Hires fix는 캐릭터 이미지의 품질을 크게 향상시킵니다. 제가 사용하는 설정은 다음과 같습니다:

[caption id="attachment_1659" align="aligncenter" width="1024"] Hi-Res fix 설정[/caption]

Hires fix는 추가적인 노력 없이도 캐릭터를 깔끔하게 정리해줍니다. 그러나 inpainting을 사용하여 초기 생성과 동일한 시드를 적용하고, 다양한 포즈 키워드를 사용하여 적당한 노이즈 제거 강도(.4–.7)로 처리하면 최종 아트의 품질이 향상됩니다. 특히 초기 생성에 Control Net Open Pose를 사용하는 경우 더욱 효과적입니다. PRO TIP: inpainting 전에 Hires fix를 실행하면 더 높은 품질의 기반을 제공하여 수동 수정 시간을 줄일 수 있습니다.

수동으로 inpainting하려면 생성된 캐릭터 시트(프롬프트, 네거티브 프롬프트, 시드 포함)를 img2img로 전송한 후 브러시로 각 포즈를 개별적으로 선택하세요. 원래 프롬프트의 4view 키워드를 inpainting하려는 포즈로 변경하세요(t-pose, side profile, back side). 노이즈 제거를 조절하여 결과를 개선하거나 시드를 변경하세요. 시드를 변경하면 높은 노이즈 제거 수준에서 캐릭터의 일관성이 떨어질 수 있지만, 더 나은 결과를 얻을 수도 있습니다.

[caption id="attachment_1665" align="aligncenter" width="544"] 세부 사항 개선을 위한 포즈 inpainting[/caption]

또한 ADetailer 플러그인을 사용하여 캐릭터를 자동으로 inpainting할 수 있습니다. 선호하는 hand, person, 및 face Adetailer 모델을 사용하세요. 낮은 노이즈 제거 강도(.3–.4)에서 시작하여 품질과 일관성 사이의 적절한 균형을 찾을 때까지 점차 증가시키세요.

Character Maker의 LoRA 버전은 매우 낮은 가중치에서 잘 작동합니다. LoRA 가중치를 .3–.5로 낮추면 Everly Heights 스타일이 캐릭터를 지나치게 덮지 않으면서 Character Maker의 모든 기능을 유지할 수 있습니다.

[caption id="attachment_1666" align="aligncenter" width="1024"] LoRA 가중치를 낮춰 Everly Heights 스타일을 조절하세요. (확대)[/caption]

이 모델은 2023년 1월부터 지속적으로 개선되어 왔으며, 다음 버전에서 개선할 점을 끊임없이 찾고 있습니다. 문제가 발생하거나 기능 요청이 있다면 [email protected]로 이메일을 보내주세요.

Everly Heights Character Maker LoRA 계열

THE STORY STUDIO TOOLKIT

EverlyHeights.tv에 대해

Everly Heights는 빌 미克斯가 기획한 프로젝트입니다. 그의 목표는 자신이 자란 웨스트버지니아의 작은 마을을 모티프로, Everly Heights라는 작은 마을에서 벌어지는 이야기들을 펼쳐보이는 것입니다. 그는 YouTube 시리즈 『Building Dreams』를 통해 자신이 사용하는 최신 AI 기술과 기법을 알려주며, 반월간 뉴스 쇼 『Stable DiNEWSion』을 통해 최신 정보를 전달합니다.

이 프로젝트와 이와 같은 향후 모델들의 개발을 지원하고 싶다면, Patreon에서 기부해 주세요.

기부하고 싶지 않으셔도 괜찮습니다! Discord에 참여하여 지금 당신이 하고 있는 일을 공유해 주세요.