사이버펑크 애니메이션 디퓨전

사이버펑크 애니메이션 캐릭터를 생성하는 AI 모델!~

Dreambooth를 활용해 튜닝된 Waifu Diffusion V1.3 모델 기반, Stable Diffusion V1.5 New VAE로 훈련 완료

by DGSpitzer

🧨 디퓨저

이 저장소에는 .ckpt 및 디퓨저 모델 파일이 모두 포함되어 있습니다. 표준 Stable Diffusion 파이프라인을 사용하여 일반 Stable Diffusion 모델과 동일하게 사용 가능합니다.

이 모델을 ONNX, MPS, 또는 FLAX/JAX로 변환할 수 있습니다.

#!pip install diffusers transformers scipy torch
from diffusers import StableDiffusionPipeline
import torch

model_id = "DGSpitzer/Cyberpunk-Anime-Diffusion"
pipe = StableDiffusionPipeline.from_pretrained(model_id, torch_dtype=torch.float16)
pipe = pipe.to("cuda")

prompt = "a beautiful perfect face girl in dgs illustration style, Anime fine details portrait of school girl in front of modern tokyo city landscape on the background deep bokeh, anime masterpiece, 8k, sharp high quality anime"
image = pipe(prompt).images[0]

image.save("./cyberpunk_girl.png")

온라인 데모

HF 스페이스를 이용해 온라인 데모를 시도해보세요:

https://huggingface.co/spaces/DGSpitzer/DGS-Diffusion-Space

또는 여기에 Colab 노트북을 사용하세요:

https://colab.research.google.com/github/HelixNGC7293/cyberpunk-anime-diffusion/blob/main/cyberpunk_anime_diffusion.ipynb

이 프로젝트를 마음에 들어하시면 커피 한 잔 사주신다면 감사하겠습니다 ;P ♥

https://www.buymeacoffee.com/dgspitzer

사용법

모델을 로드한 후, 프롬프트에 키워드 dgs와 함께 illustration style을 사용하시면 더 좋은 결과를 얻을 수 있습니다.

샘플러로는 Euler A를 사용하면 최상의 결과를 얻을 수 있습니다 (DDIM도 어느 정도 작동함), CFG Scale 7, 스텝 수 20을 권장합니다.

예시 1:

portrait of a girl in dgs illustration style, Anime girl, female soldier working in a cyberpunk city, cleavage, ((perfect femine face)), intricate, 8k, highly detailed, shy, digital painting, intense, sharp focus

사이버 로봇 남성 캐릭터의 경우, muscular male를 추가하면 출력 품질이 향상됩니다.

예시 2:

a photo of muscular beard soldier male in dgs illustration style, half-body, holding robot arms, strong chest

예시 3 (Stable Diffusion WebUI 사용 시):

AUTOMATIC1111의 Stable Diffusion WebUI를 사용하는 경우

다음과 같이 프롬프트로 단순히 사용하고, Euler A 샘플러, CFG Scale 7, 스텝 수 20, 출력 해상도 704 x 704px로 설정하세요:

an anime girl in dgs illustration style

더 깔끔한 얼굴을 위해 네거티브 프롬프트로 다음을 설정하세요:

out of focus, scary, creepy, evil, disfigured, missing limbs, ugly, gross, missing fingers

이렇게 하면 위의 샘플 이미지와 정확히 동일한 스타일의 결과를 얻을 수 있습니다.

참고: 본 모델 사용 시 Stable Diffusion의 CreativeML Open RAIL-M 라이선스 에 동의하는 것으로 간주됩니다.