Tutorial: konyconi-style LoRA - konyconi

이 튜토리얼의 최신 버전은 여기에 있습니다: https://civitai.com/articles/771/tutorial-konyconi-style-lora-update

몇 차례의 시도와 오류를 거쳐, 다양한 아이템에 스타일이나 특징을 적용할 수 있는 효율적인 LoRA 생성 방법을 발견했습니다. 제 LoRA는 civitai.com에서 매우 잘 받아들여졌고, 실제로 이 과정이 얼마나 간단하고 빠른지 놀랍습니다. 마치 cheating처럼 느껴질 정도입니다. 인정을 받는 건 즐거웠지만, 이제는 누구에게나 무료로 제 접근법을 조용히 공유하는 시점이라고 생각합니다.

이 튜토리얼은 제가 대부분의 LoRA를 만들 때 따르는 일반적인 프로세스를 보여줍니다.
요약하면: 내가 사용하는 이미지 생성 기술을 활용하며, 간소한 일러스트를 트레이닝 데이터에 포함시키고, 기본적인 설명문을 사용합니다: [트리거어워드] [개념], 그리고 간단한 파이썬 스크립트를 통해 설명 파일을 생성합니다.

단계 1: 아이디어(스타일/특징)를 찾고, 당신의 최애 체크포인트로 SD가 그 스타일을 표현할 수 없는지 확인하세요. 예를 들어 "보헤미안 스타일"을 생각해보죠.

안녕하세요, revAnimated님, 제게 "보헤미안 스타일의 탱크"를 만들어 주세요:

글쎄요, 보헤미안 스타일은 시도해볼 만한 좋은 아이디어 같습니다.

단계 2: 다른 이미지 생성기를 확인해보세요.

안녕하세요, Bing님, 제게 "보헤미안 스타일의 탱크"를 만들어 주세요:
프롬프트: 보헤미안 스타일의 전투 탱크 일러스트

안녕하세요, DALEE-2님, 제게 "보헤미안 스타일의 탱크"를 만들어 주세요:
프롬프트: 보헤미안 스타일의 전투 탱크, 일러스트

좋습니다, 이 이미지들은 보헤미안 스타일을 어느 정도 반영하고 있는 것으로 보입니다. 따라서...

단계 3: 보헤미안 스타일을 이해할 수 있는 이미지 생성기를 사용해 트레이닝 데이터를 생성하세요.

제 일부 LoRA는 트레이닝 데이터에 생성된 이미지를 전혀 사용하지 않지만, 다른 것은 일부 생성 이미지를 포함합니다. 특히 최근 제 LoRA는 생성된 이미지만을 사용합니다.

예를 들어, "보헤미안 탱크", "보헤미안 컴퓨터", "보헤미안 마을", "보헤미안 디렉라이블", "보헤미안 잠수함" 등을 생성하세요. 각각의 개념에 대해 16장의 이미지를 목표로 하되, 총 50100장 정도로 구성하세요.

"보헤미안 탱크"처럼 드문 아이템을 생성할 때는 STEP 2의 이미지와 유사한 결과를 얻을 수 있습니다. 이 이미지를 트레이닝 데이터에 포함시키는 것에 대해 걱정하지 마세요. 보통 이들은 (반)현실적인 그림보다 더 나을 수 있습니다. 예를 들어, BohoAI의 트레이닝 데이터에는 디렉라이블에 대해 아래와 같은 예시들만 포함되어 있습니다:

하지만 최종 모델은 이렇게 출력합니다:

또한, 일부 (반)현실적인 이미지도 포함하세요. 예를 들어 "보헤미안 거실"처럼 몇몇 개념은 생성이 쉬울 수 있습니다.

단계 4: 로고, 생성된 저자 서명, 기타 유사한 요소를 제거하여 이미지를 정리하세요. 또한, 탱크 탑에 추가된 캐논 같은 불필요한 요소도 제거하세요.
제거 작업은 대충 해도 됩니다. 그냥 불필요한 부분 위에 다른 이미지 부분을 겹쳐 덮어쓰면 됩니다.

이미지를 크기 조정하지 마세요.

단계 5: 설명문 작성

매우 간단한 설명문을 사용하세요. 예를 들어 "BohoAI 디렉라이블".

이 과정을 빠르게 하려면 이런 팁을 사용해 보세요: 개념 이름으로 폴더를 만들어 이미지를 저장하세요. 예를 들어, 모든 디렉라이블 이미지는 "dirigible"라는 폴더에 넣으세요.

모든 이미지를 각각의 폴더에 정리했다면, 첨부된 파일에 있는 파이썬 스크립트를 실행하세요. 이 프로그램은 폴더를 재귀적으로 탐색하며, 각 .jpg 파일에 대해 주어진 트리거어워드와 폴더 이름을 포함한 .txt 파일을 생성합니다.

단계 6: 준비 완료! LoRA를 학습시키세요.

일반적으로 사용하는 설정으로는 큰 문제 없을 것입니다. 몇 차례 실험해 본 결과, 원하는 결과를 얻기 위해 rank 128과 alpha 128이 필요해 보입니다. 나중에 더 깊이 연구할 예정입니다.

저는 kohya ss용 설정 파일을 공유하지만, 참고 부탁드립니다. 저는 자주 변경하고 의도 없이 실험합니다. BohoAI는 이 설정을 활용해 10번의 반복 학습으로 훈련되었습니다.

이 LoRA는 보헤미안 스타일을 간직하고 있으며, 훈련되지 않은 개념에도 뛰어난 방식으로 적용할 수 있습니다.

dajusha의 리뷰 이미지를 확인하세요 (제 데이터셋에는 어떠한 동물의 이미지도 포함되어 있지 않습니다.): https://civitai.com/images/616301?period=Week&periodMode=published&sort=Most+Reactions&view=categories&modelVersionId=56427&modelId=51966&postId=172873

제 비밀을 공개했고, 작은 부탁 하나만 드리고 싶습니다: 이 방법을 사용해 당신의 LoRA를 게시할 경우, 이 튜토리얼을 적어주십시오.

다수의 크리에이터가 이 아이디어를 받아들여 발전시킴으로써, 결국 civitai.com 콘텐츠의 질을 높일 수 있을 것입니다. 제 금빛 언니를 공유한 만큼, 제가 받는 작은 응원의 인사로 커피 한 잔을 주셔도 감사하겠습니다:

https://www.buymeacoffee.com/konyconiN

https://ko-fi.com/konyconi7992