πŸ§ͺ Img2Vid - FAST LOOP ANIMATION

μ„ΈλΆ€ 정보

파일 λ‹€μš΄λ‘œλ“œ

λͺ¨λΈ μ„€λͺ…

생성 ν”„λ‘œμ„ΈμŠ€λ₯Ό μ‹œμž‘ν•˜λ €λ©΄, 이미지λ₯Ό 주황색 "이미지 λ‘œλ“œ" λ…Έλ“œλ‘œ λ“œλž˜κ·Έν•˜μ—¬ λ“œλ‘­ν•˜μ„Έμš”.

ν•„μš”ν•œ λ§₯락을 μ„Έλ°€ν•˜κ²Œ μ‘°μ •ν•˜λ €λ©΄ μ£Ό ν”„λ‘¬ν”„νŠΈμ™€ 이미지 자격 μš”μ†Œλ₯Ό 자유둭게 μ‘°μ •ν•˜μ„Έμš”. μ›Œν¬ν”Œλ‘œμš° κΈ°λ³Έ 섀정은 λ©‹μ§„ μ• λ‹ˆλ©”μ΄μ…˜μ„ μƒμ„±ν•©λ‹ˆλ‹€.

1. λ‘œλ”

λͺ¨λ“  SD1.5 λͺ¨λΈμ΄ ν˜Έν™˜λ˜μ§€λ§Œ, LCM LoRA κ°€μ€‘μΉ˜λ₯Ό 적절히 μ‘°μ •ν•˜λŠ” 것이 μ€‘μš”ν•©λ‹ˆλ‹€:

β€’ SD1.5 λͺ¨λΈμ˜ 경우, κ°€μ€‘μΉ˜λ₯Ό 0.7μ—μ„œ 1 μ‚¬μ΄λ‘œ μ„€μ •ν•˜μ„Έμš”.

β€’ SD1.5 LCM λͺ¨λΈμ˜ 경우, κ°€μ€‘μΉ˜λ₯Ό 1μ—μ„œ 2 μ‚¬μ΄λ‘œ μ‘°μ •ν•˜μ„Έμš”.

μ£Ό λͺ¨λΈ:

β€’ /model/306814/photon-lcm

LCM LoRA:

β€’ https://huggingface.co/wangfuyun/AnimateLCM/blob/main/AnimateLCM_sd15_t2v_lora.safetensors

2. IPAdapter μ„Ήμ…˜:

IPAdapter μ„Ήμ…˜μ—μ„œ 첫 번째 이미지 λ‘œλ”λŠ” μ£Ό μ΄λ―Έμ§€μš©μœΌλ‘œ μ§€μ •λ˜λ©°, μ΄λŠ” ꡬ성 크기에 맞게 자λ₯΄γ‚‰γ‚ŒγΎγ™. 두 번째 λ‘œλ”λŠ” ꡬ성 λŒ€μƒ μ΄λ―Έμ§€μš©μž…λ‹ˆλ‹€.

ClipVision:

β€’ https://huggingface.co/laion/CLIP-ViT-H-14-laion2B-s32B-b79K/blob/main/model.safetensors

IPAdapter PLUS:

β€’ https://github.com/cubiq/ComfyUI_IPAdapter_plus

IPAdapter Composition:

β€’ https://huggingface.co/ostris/ip-composition-adapter/tree/main

3. AnimateDiff μ„Ήμ…˜:

"Multival dynamic" λ…Έλ“œλ₯Ό μ‚¬μš©ν•˜μ—¬ λͺ¨μ…˜ 강도λ₯Ό μ‘°μ •ν•˜μ„Έμš”.

λͺ¨μ…˜ λͺ¨λΈ:

β€’ https://huggingface.co/wangfuyun/AnimateLCM/blob/main/AnimateLCM_sd15_t2v.ckpt

4. ControlNet μ„Ήμ…˜

μ„Έ κ°€μ§€ μ‚¬μš© κ°€λŠ₯ν•œ ControlNet μ€‘μ—μ„œ μ„ νƒν•˜μ„Έμš”:

Tile:

β€’ https://huggingface.co/lllyasviel/ControlNet-v1-1/blob/main/control_v11f1e_sd15_tile.pth

Reference ControlNet:

β€’ Advanced ControlNet μ‚¬μš©μž μ •μ˜ λ…Έλ“œμ— ν†΅ν•©λ˜μ–΄ μ œκ³΅λ©λ‹ˆλ‹€.

SparseCtrl:

β€’ https://huggingface.co/guoyww/animatediff/blob/main/v3_sd15_sparsectrl_rgb.ckpt

5. KSampler / HighRes Fix

"PatchModelAdd" λ…Έλ“œλŠ” SD1.5 λΉ„μœ¨ ν•œκ³„λ₯Ό μ΄ˆκ³Όν•  λ•Œ λ³€ν˜•κ³Ό μ•„ν‹°νŒ©νŠΈλ₯Ό λ°©μ§€ν•˜κΈ° μœ„ν•΄ μ„€κ³„λ˜μ—ˆμŠ΅λ‹ˆλ‹€. 이 λ‹¨κ³„λŠ” μƒλž΅ν•  수 μžˆμŠ΅λ‹ˆλ‹€.

KSampler μ˜΅μ…˜μ— λŒ€ν•œ 쑰정은 ν•„μš” μ—†μŠ΅λ‹ˆλ‹€.

초기 μΉ˜μˆ˜μ™€ VRAM μš©λŸ‰μ— 따라 Highres fix 슀크립트λ₯Ό μ„Έλ°€ν•˜κ²Œ μ‘°μ •ν•˜μ„Έμš”.

빈 λ ˆμ΄ν„΄νŠΈ λ˜λŠ” 이미지가 μ£Όμž…λœ λ ˆμ΄ν„΄νŠΈ 쀑 ν•˜λ‚˜λ₯Ό μ„ νƒν•˜μ„Έμš”. ν›„μžλŠ” 일반적으둜 원본 μ΄λ―Έμ§€μ˜ μ„ΈλΆ€ 사항을 더 많이 μœ μ§€ν•˜λ©°, λͺ¨μ…˜μ„ μ€„μ΄λŠ” κ²½ν–₯이 μžˆμŠ΅λ‹ˆλ‹€.

6. 좜λ ₯

"GMFSS Fortuna"λŠ” λΉ„λ””μ˜€λ₯Ό λ³΄κ°„ν•˜μ—¬ 더 λΆ€λ“œλŸ½κ³  κΈ΄ 좜λ ₯을 μ œκ³΅ν•©λ‹ˆλ‹€. λ°°μˆ˜λŠ” 일반적으둜 2 λ˜λŠ” 3으둜 μ„€μ •λ©λ‹ˆλ‹€.

λΉ„λ””μ˜€ 좜λ ₯ μ•„λž˜μ— μ‚¬μš©μž μ •μ˜ 디렉토리와 파일λͺ…을 μ§€μ •ν•˜μ—¬ μ •λ¦¬λœ 좜λ ₯ 폴더λ₯Ό μœ μ§€ν•˜μ„Έμš”.

편의λ₯Ό μœ„ν•΄ 선택적 HDR 좜λ ₯ ν”Œλ‘œμš°λ„ ν¬ν•¨λ˜μ–΄ μžˆμŠ΅λ‹ˆλ‹€.

해상도 섀정을 λ³€κ²½ν•˜μ§€ μ•ŠμœΌλ©΄, 이 μ›Œν¬ν”Œλ‘œμš°λŠ” λ‹€μŒμ„ μˆ˜ν–‰ν•©λ‹ˆλ‹€:

β€’ μ•½ 2λΆ„ μ•ˆμ— λ Œλ”λ§ μ™„λ£Œ (32ν”„λ ˆμž„ + 보간)

β€’ 16GB VRAM μ‚¬μš©

β€’ 752x1344 ν”½μ…€μ˜ 좜λ ₯ 생성

이 λͺ¨λΈλ‘œ λ§Œλ“  이미지

이미지λ₯Ό 찾을 수 μ—†μŠ΅λ‹ˆλ‹€.