XL Mechaturn Helper XL

*모든 좋아요, 댓글, 게시물이 저를 더 나아가게 도와줍니다!!

더 많은 프로젝트 파일/세부 정보/워크플로우는 제 Patreon에서 확인하실 수 있습니다: Chamber | 게임, 아트 제작 | Patreon, 여기서도 추가적인 일반 지원 부탁드립니다~
구독은 제가 더 나은 업데이트를 하고 더 많은 콘텐츠를 만들 수 있도록 도와줍니다~

!!! 바디 턴 헬퍼로 생성된 이미지를 캐니 입력으로 약 0.2 가중치로 사용하면 품질이 크게 향상되고, SDXL이 프롬프트를 더 잘 이해하는 장점을 충분히 활용할 수 있습니다!!! (대부분의 샘플 이미지와 마찬가지로, 프롬프트와 결과를 비교해보세요. 멋지네요! 나중에 이 결과들을 병합하여 LoRA를 학습하여 간소화할 예정입니다~)

계획, 미래, 곧 진행 예정...

- [ ] 3D 모델 렌더링 테스트에서 더 많은 데이터(약 100장, 향상이 있을 경우 게시 예정)
- [ ] 더 많은 스텝 테스트(약 5000, 향상이 있을 경우 게시 예정)

- [ ] 더 나은 태그 및 프롬프트 테스트(와일드카드 포함, 향상이 있을 경우 게시 예정)
- [ ] charturn(다른 사람의 턴테이블 포함) SDXL/SD1.5용 TI
- [ ] charturn(다른 사람의 턴테이블 포함) SD1.5 및 SDXL용 리믹스 버전, 약 60장의 선택된 생성 이미지를 기반으로 출력물을 더 아름답게 만들려고 시도(향상이 있을 경우 게시 예정), 현재 버전은 20-50장의 3D 모델 렌더 이미지에 기반하여 다중 시점 보정을 목표로 함
- [ ] charturn 나이/몸매/신장/복장 실루엣/얼굴 제어 테스트(향상이 있을 경우 게시 예정)
- [ ] 제 LoRA/모델은 공개적으로 게시하며, 저의 학습/생성 도구/워크플로우는 Patreon에서만 공개됩니다

손/손바닥/손가락, 머리카락/헬멧/마스크, 의상의 품질을 개선하기 위해 XL CKPT/LoRA 계획을 시도했습니다.
제어 가능한 요소/스타일, 수량 및 일관성 측면에서 일부 개선이 있었으며, 위의 샘플에서 그 효과를 느낄 수 있습니다.
제가 느낀 가장 큰 개선점은 프롬프트에 대한 더 나은 이해입니다. 예를 들어 특정 옷과 캐릭터에 대해 프롬프트의 세부 사항으로 출력을 더 잘 제어할 수 있게 되었습니다.

하지만 학습 및 테스트 후, SDXL은 이 시점(2024년 3월 22일)에서 일부 단점이 있다고 생각합니다:

가장 큰 문제는, 아직 SD 1.5만큼 훌륭한 결과를 내는 XL 체크포인트와 XL LoRA가 부족합니다.
스타일 오프셋과 같은 디자인 도구뿐 아니라, 베이스/미용 모델로서의 아름다움 수준도 마찬가지입니다.
Open Pose 컨트롤러 XL은 SD 1.5 버전만큼 좋지 않습니다.
학습/생성 속도가 느리고 어렵습니다.
(1536*1024 이미지를 1920*1024로 업스케일한 후 ADetailer를 4개 얼굴에 적용하는 데 4~5분 소요됨. 실제로 손 개선 기능을 사용하면 더 나은 결과를 얻을 수 있지만, ADetailer에 10개 이상의 손바닥을 추가하기엔 너무 느립니다.)
반면, 가벼운 버전은 더 빠르지만 현재 결과는 저에게 충분히 좋지 않습니다.

저는 XL 체크포인트에 익숙하지 않으며, 현재 학습 비용이 너무 비싸다고 느껴집니다. 따라서 다른 훌륭한 창작자들을 응원하고 더 나은 결과를 기다리겠습니다.
추가로 XL LoRA 도구에 대해서는 나중에 연구하고 시도해보겠습니다~

좋은 소식! RTX 4080 랩톱 12GB VRAM은 일부 설정과 kohya_ss 업데이트 후 XL LoRA 학습에 충분합니다!

!!! 비슷한 결과를 원하신다면,
위의 원본 이미지 예시에서 대부분의 생성/샘플 설정을 반복해 주세요.
ControlNet(OpenPose) 및 다른 사람의 LoRA를 포함하여요.
다른 추가 LoRA/TI들은 각기 특별한 효과를 가지므로, 목표에 맞게 추가하거나 삭제하며 테스트해보세요~

여기는 제가 새로운 워크플로우, AI 기반 디자인 및 텍스처(카메라 기반 프로젝션) 도구를 위해 학습한 LoRA 중 하나입니다.

SD XL용:

Clothturn Helper XL Remix - v1.0 | Stable Diffusion LoRA | Civitai

Bodyturn Helper XL - v1.0 | Stable Diffusion LoRA | Civitai

Clothturn Helper XL - v1.0 | Stable Diffusion LoRA | Civitai

Charturn Helper Merged XL - v1.0 | Stable Diffusion LoRA | Civitai

SD 1.5용:

이 LoRA들은 향후 Blender에서 제 캐릭터 라이브러리와 가장 잘 어울립니다.
3D 모델 메시 형상 편집 가이드, 자동 텍스처링/쉐이딩, 웨이트 페인팅 등을 포함합니다.
대부분 저의 게임 개발을 위한 자산 제작을 위해 설계되었으며, 저처럼 독립 개발자들에게 도움이 될 수 있습니다.

개인적 권장 체크포인트(현재 SDXL용으로 테스트한 결과 유일하게 적합한 것):
AbyssOrange XL Else - v1.0 | Stable Diffusion Checkpoint | Civitai

또한 학습 데이터는 여기에 있습니다. 그 중 약 30%는 제가 이전에 생성하고 게시한 아트워크에서 렌더링한 것이며, 3D 모델 by ChamberSu1996 - Sketchfab에서 확인하실 수 있습니다.
나머지는 인터넷에서 구입 및 수집한 것입니다: TrainDataPack.zip
이 초기 및 테스트 버전의 각 LoRA는 약 20~50장의 이미지로 학습되었지만, 지금도 매우 유용합니다.

제가 생성한 모든 LoRA에 대한 kohya_ss 학습 설정은 데이터, 이미지 크기, 에포크만 다르고 나머지는 동일합니다(XL 옵션 활성화): ToonHairTurn_v1.json
(저는 현재 학습에 익숙하지 않으므로, 이번에는 각 단계/기능을 작동하게 만드는 데 집중하고 설정을 가능한 한 단순/기본값으로 유지했습니다.
향후 더 합리적인 데이터, 태그, 학습 설정을 배우고, 제 개인 아트워크 렌더링 이미지만 사용하여 더 나은 LoRA를 학습할 예정이며, 이는 공개 사용을 보장하고 저의 스타일/취향을 따르도록 할 계획입니다.)

Civitai에서 동적 프롬프트 및 와일드카드를 추가하여 무한한 다양한 결과를 얻을 수 있습니다.
Gemini 및 Chat GPT를 사용하여 프롬프트 와일드카드를 생성해 테스트하는 것도 매우 효과적입니다~

질문이나 이 내용 중 흥미로운 부분이 있다면, 댓글을 남기거나 [email protected]으로 연락주세요

또한 Discord 채널도 있습니다~
https://discord.gg/SFJFcctfgD

모든 좋아요, 댓글, 게시물, Patreon Chamber | 게임, 아트 제작 | Patreon 구독은 더 나은 업데이트, 더 많은 콘텐츠 제작 및 공개를 위한 예산 확보에 도움이 됩니다~

모델 유형	LORA
기본 모델	SDXL 1.0
게시일	3/30/2024

세부 정보

파일 다운로드

이 버전에 대해

모델 설명

이 모델로 만든 이미지