Product Design (Realistic minimalism-eddiemauro) LORA

사용 전 주의사항

Stable Diffusion이 어떻게 작동하는지 알아야 합니다. 저는 모델을 실행하기 위한 인터페이스로 Automatic1111을 추천합니다.
이 모델은 SD 1.5 기반으로 학습되었으므로 완벽하지 않을 수 있습니다. 안정적인 생성을 위해 많은 테스트를 거쳐야 했습니다. 더 나은 기본 모델(예: SD XL)이 등장하면 모델을 향상시킬 것입니다.
이 모델은 LORA 모델이므로 체크포인트 모델의 확장으로 사용하는 것이 좋습니다. 현실적인 데이터셋 모델을 추천합니다.
저는 AI 이미지 생성에 대해 설명하는 인스타그램을 운영 중이며, 관심 있으신 분은 아래 링크를 통해 팔로우해 주세요: https://www.instagram.com/eddiemauro.design/

소개

제품 디자인 (현실적인 미니멀리즘 - eddiemauro) LORA: 안녕하세요, 저는 제품 및 자동차 디자이너이며, AI를 활용해 디자인하는 것이 매우 흥미롭다고 생각합니다. 이 도구(LORA)는 디자인 과정(형태/아이디어 생성)에서 매우 유용하지만, 시각적 완성도를 높이는 데에도 큰 도움이 됩니다. 또한 스케치나 3D 계획도 렌더링 스타일로 전환할 수 있습니다. 저는 기본 LORA를 제작하고 다양한 체크포인트로 테스트한 결과, 독특한 형태의 "미니멀리즘" 스타일이 도출되었습니다. 이 스타일은 어두운 분위기(마지크의 영향을 받음)를 가지면서도 미니멀리즘이 유지되지만, 더 현실적인 오브제 형태를 보여주며 그에 더 잘 적응합니다. 따라서 저는 이 모델이 제 다른 모델보다 더 '창의적'보다는 '현실적'이라고 생각합니다.

제 작업을 지지하시고 더 나은 품질의 모델을 업로드할 수 있도록 도와주시고 싶으시면 아래 링크를 통해 기부해 주세요. 매우 감사하겠습니다: https://ko-fi.com/eddiemauro

설치 방법

저는 Stable Diffusion 이미지 생성을 위한 최고의 UI인 Automatic1111을 사용하고 있습니다. 따라서 로컬에 설치하거나 어떤 Colab 또는 기타 호스팅을 통해 온라인으로 사용하는 것을 추천합니다. 온라인에서 설치 방법을 안내하는 튜토리얼이나 영상도 찾을 수 있습니다. 로컬 설치를 고려하신다면, 여기의 튜토리얼 동영상을 시청하시는 것이 좋습니다. 또한 안정적인 인터페이스와 "Microsoft Edge"를 이용하여 실행하려면 적어도 6~8GB의 VRAM을 가진 그래픽 카드(NVIDIA)를 추천합니다. "Google Chrome"에서는 문제가 생길 수 있으니 주의하세요. 또한 "medvram" 또는 "lowvram" 옵션을 "xformers" 옵션과 함께 설치하는 것도 추천합니다(온라인에서 방법을 검색해 보세요).
이는 LORA 모델입니다. 설치 방법은 여기의 동영상에서 확인할 수 있습니다. 간단히 파일을 다운로드하여 LORA 모델 폴더 내에 넣기만 하면 됩니다. LORA 파일 확장자는 ".safetensor"이며, 일반적으로 체크포인트 파일보다 크기가 작습니다(체크포인트는 1기가 이상일 수 있음).
LORA를 사용하려면 체크포인트 모델도 함께 설치해야 합니다. 현실적인 시각화나 3D/렌더링에 특화된 모델을 선택하세요.
이미지 생성 시에는 제가 제안한 모든 사항을 따라야 하며, 그렇지 않으면 좋은 품질의 이미지를 생성하는 것이 불가능합니다. 또한 오늘날 AI 이미지 생성은 여전히 일관되거나 완벽하지 않기 때문에, 품질을 얻기 위해 시간과 수많은 테스트를 투자해야 합니다.

이미지 생성을 위한 추천 사항

최적의 체크포인트 모델: SD 1.5 기반 모델. 반드시 다음 체크포인트를 사용해야 합니다: "majicMIX realistic (v4)" (/model/43331/majicmix-realistic), "majicMIX Lux v1 (v2)" (/model/56967/majicmix-lux), "XXMix_9realistic v2.5 (test v3)" (/model/47274/xxmix9realistic) – 일부 경우에 블러 효과가 발생할 수 있음, "A-Zovya RPG v3" (/model/8124/a-zovya-rpg-artist-tools) – 환경이 더 단순함, "Rev Animated v.1.2.2" (/model/7371/rev-animated) – 더 많은 색감을 가진 스타일. 먼저 모델을 다운로드하고 설치한 후 SD UI에 로드하세요. 최신 버전으로도 시도해 보세요.
활성화 토큰/캡션: 프롬프트 영역에서 첫 번째 단어는 반드시 "emauromin" 또는 "emauromin style" 이어야 하며, 스타일을 활성화합니다. 이는 필수 조건입니다. 그렇지 않으면 제대로 작동하지 않습니다.
추가 추천 프롬프트: 프롬프트 공간에서 다음과 같은 단어를 사용하면 이미지 생성 품질이 향상됩니다.

양의 영역: 'futuristic, finely detailed, purism, ue 5, a computer rendering, minimalism, octane render, 4k'
음의 영역: '(worst quality:2), (low quality:2), (normal quality:2), lowres, ((monochrome)), ((grayscale)), cropped, text, jpeg artifacts, signature, watermark, username, sketch, cartoon, drawing, anime, duplicate, blurry, semi-realistic, out of frame, ugly, deformed'
또한 예시 이미지의 메타데이터를 확인하고 프롬프트를 똑같이 시뮬레이션해 보세요.

추천되는 텍스트 인버전/임베딩 또는 LORA 도구: "EasyNegative"는 음의 프롬프트 영역에서 아주 좋은 텍스트 인버전 중 하나로, 반드시 사용하시길 추천합니다. 여기에서 다운로드 후 "embeddings" 폴더에 파일을 넣으세요. 또한 "Detail Tweaker"를 사용하면 이미지의 세부 사항을 줄일 수 있습니다. 여기에서 다운로드하여 LORA처럼 설치하고, 양의 프롬프트 내에서 "-0.5" 값으로 사용하세요. 체크포인트가 너무 많은 세부사항을 표출할 때만 사용하며, 미니멀리즘이 이미 적용된 상태에서는 사용하지 마세요. 이는 오브제의 형태를 크게 변화시킬 수 있습니다.
LORA 가중치: 모델을 향상시키기 위해 노력 중입니다. 현재는 0.7에서 1.0 사이에서 잘 작동하며, 값이 클수록 미니멀리즘이 강화됩니다. 때때로 0.8~0.9 가 1.0보다 더 적합한 경우도 있습니다.
VAE: 사용하는 체크포인트에 따라 달라집니다. 일반적으로 "vae-ft-mse-840000-ema-pruned" 이라는 Stable Diffusion 공식 VAE를 추천합니다.
Clip Skip: 모델은 2단계로 학습되었으므로, 이 값도 2로 설정하세요.
스텝과 CFG: 스텝은 "20~~40", CFG 스케일은 "6~~8"을 추천합니다. 이상적인 값은 스텝 30, CFG 7입니다. 다음 모델에서는 이 값이 변경될 수 있습니다.
샘플러: 주로 "EulerA", "DPM++SDE Karras", "DPM++2S a"를 사용합니다. Euler은 더 단순하고 창의적인 스타일을 보여줍니다. 다른 샘플러도 원하신다면 실험해 보세요.
배치: txt2img 모드에서 4로 값을 설정하여 하나 이상의 이미지를 생성하고 결과를 관찰하세요. 그래픽 카드가 좋다면 "Batch size"를 사용하면 동시에 4개의 이미지를 생성할 수 있으나, 생성 시간이 늘어납니다. 만약 컴퓨터가 이를 처리하기 어려우면 "Batch count"로 변경해 4개의 이미지를 순차적으로 생성하세요. 이 경우 생성 시간은 더 오래 걸립니다.
이미지 비율: 512x512, 768x512, 512x768을 추천하며, 다른 비율로도 실험해 볼 수 있습니다. 이미지 크기가 너무 클 경우 스타일이 흐려질 수 있으므로 크기를 늘리고 싶다면, txt2img 모드에서 hires.fix를 사용하거나, img2img의 증가 방법, Ultimate SD Upscale 스크립트 확장 + ControlNet, 또는 GAN 모델을 이용한 업스케일링을 사용하세요.
확대된 이미지 생성 방법: Stable Diffusion에서 큰 이미지를 생성하는 방법은 총 4가지입니다. 온라인에서 방법을 확인할 수 있습니다.
1. txt2img hires.fix: 업스케일 모델로 "4x-UltraSharp"를 추천하며, 여기에서 다운로드 후 ".pth" 파일만 추출하여 "ESRGAN" 폴더에 넣으세요. hires.fix 옵션에서 "업스케일 by" 값을 설정하고, "노이즈 강도(denoise strength)"를 "0.5~0.7"로 설정하세요.
2. img2img 모드 증가: txt2img에서 생성한 이미지를 불러와 img2img 모드로 전환하고, 최소 1.5배 이상의 크기로 확장하면서 "노이즈 강도"를 "0.3~0.5"로 설정하세요.
3. ControlNet + Ultimate SD Upscale: img2img 설정을 그대로 사용하면서 ControlNet 확장의 "Tile" 모드와 Ultimate SD Upscale 스크립트를 활성화하세요. 이 방법은 여기의 튜토리얼을 참고하는 것이 좋습니다.
4. Extras + GAN 모델: txt2img에서 생성한 이미지를 "Extras" 탭으로 보낸 다음, GAN 모델을 선택하여 확장하세요. "4x-UltraSharp" 모델도 사용할 수 있습니다.
창작에 대한 더 높은 통제력 얻기: 원하는 형태를 더 정밀하게 생성하기 위해 "ControlNet" 확장을 사용하세요. 스케치와 함께 실험해 보는 것도 가능합니다. "Scribble" 또는 "Lineart" 모드를 사용하세요. 이 확장 프로그램은 설치 후 사용법을 학습하는 것이 좋습니다. 관련된 온라인 동영상이 많습니다.
이미지 메타데이터를 위한 프롬프트 복사: 아래 링크에서 예시 이미지를 다운로드하여 Automatic1111의 "PNG info" 탭에 붙여넣을 수 있습니다.

예시 프롬프트:

양의 프롬프트:
emauromin style, futuristic armchair, finely detailed, purism, ue 5, a computer rendering, minimalism, octane render, 4k lora:eddiemauroLora2:0.8

음의 프롬프트:
EasyNegative, (worst quality:2), (low quality:2), (normal quality:2), lowres, ((monochrome)), ((grayscale)), cropped, text, jpeg artifacts, signature, watermark, username, sketch, cartoon, drawing, anime, duplicate, blurry, semi-realistic, out of frame, ugly, deformed

스텝: 20~~40 (EulerA는 20만으로도 충분, DPM++SDE Karras 또는 DPM++2S a는 30~~40 권장)
CFG 스케일: 6~8 (이상적인 값: 7)

앞으로 제공될 것들

이 모델을 더욱 발전시키는 작업을 진행하고 있습니다. 현재는 512x512 이미지 비율로 훈련되었으며, 차후에는 768x768(더 큰 크기) 및 다른 설정(캡션, 스텝, 에포크 등)을 실험해볼 예정입니다. 이 버전의 더 나은 모델을 원하시면 ko-fi에서 지지해 주세요. 더 많은 분들이 지지해 주시면 더 많은 시간을 투자해 모델을 훈련하고 개선할 수 있지만, 그렇지 않으면 어렵습니다.

제 첫 번째 프라이빗 모델인 "eddiemauro scene"을 릴리스했는데, Ko-fi 멤버십 레벨 1의 사용자에게 제공되며, 렌더링용 미니멀리즘 풍경 생성에 적합합니다. 프라이빗 모델에 접근하고 싶으시면 지지해주고 멤버십에 가입하세요. 또한 제품 및 자동차 디자인 중심의 모델을 더 많이 공개할 예정입니다.

라이선스

Stable Diffusion 라이선스 링크를 참고하세요. 이 특정 모델은 이미지 생성 목적으로 어떤 용도든 사용 가능하며, 상업적 이용(생성한 이미지 판매 포함)도 가능합니다. 하지만 다음 사항은 금지됩니다: