Experimental ๐Ÿงช by Huggy

์„ธ๋ถ€ ์ •๋ณด

ํŒŒ์ผ ๋‹ค์šด๋กœ๋“œ

๋ชจ๋ธ ์„ค๋ช…

๐Ÿ’ก ์‚ฌ์ดํŠธ์—์„œ ๋ชจ๋“  ๋‚ด ๋ชจ๋ธ์„ ์ฐพ์œผ๋ ค๋ฉด "huggy"๋ฅผ ๊ฒ€์ƒ‰ํ•˜์„ธ์š”.

๐Ÿ’ก ์˜ฌํ•ด ์ดˆ(2024๋…„) Civitai๋Š” ๋ฐฑ์—”๋“œ๋ฅผ A1111์—์„œ ComfyUI๋กœ ์ „ํ™˜ํ–ˆ์Šต๋‹ˆ๋‹ค.่ฟ™ๆ„ๅ‘ณ็€ๆ‚จๆ— ๆณ•ๅ†ไฝฟ็”จๅŽปๅนด็š„ๆ็คบ่ฏๆˆ–็งๅญๆฅ็”Ÿๆˆ็›ธๅŒ็š„ๅ›พๅƒใ€‚ๆœ€ๅฅฝ็งป้™คๆ‰€ๆœ‰ๆƒ้‡ๅ€ผ๏ผŒไปŽๅคดๅผ€ๅง‹ใ€‚

๐Ÿ“’ ์ด๋Š” ๋ณต์žกํ•œ ๋Œ€ํ˜• LoRA์ž…๋‹ˆ๋‹ค. ๋‹ค์Œ ํ‘œ๋ฅผ ์ฝ์–ด์ฃผ์„ธ์š”!

๐Ÿ“’ ๋ชจ๋“  ๊ฒƒ์ด ์ง„ํ–‰ ์ค‘์ž…๋‹ˆ๋‹ค:

๋ณด์‹œ๋‹ค์‹œํ”ผ, ์ €๋Š” ๋‹ค์–‘ํ•œ ์—ํฌํฌ, ํ•™์Šต๋ฅ  ๋ฐ ์ž์›์œผ๋กœ ์ œ์ž‘๋œ ์œ ์‚ฌํ•œ LoRA๋ฅผ ๋งŽ์ด ์—…๋กœ๋“œํ–ˆ์Šต๋‹ˆ๋‹ค. ๊ฐ LoRA๋Š” ๋ฏธ์„ธํ•˜๊ฒŒ ๋…ํŠนํ•˜๋ฉฐ, ํ–ฅํ›„ ํ’ˆ์งˆ(๊ณผ๋„ํ•œ ์„ ๋ช…๋„/๊ธ€๋ฆฌ์น˜/๋ฏธ์™„์„ฑ), ํ›ˆ๋ จ ์ž๋ฃŒ์— ๋Œ€ํ•œ ์œ ์‚ฌ์„ฑ, ์บ๋ฆญํ„ฐ ํŠน์ง•(๋ชธํ†ต ์™œ๊ณก, ๋ˆˆ์˜ ํ’ˆ์งˆ ์ €ํ•˜, ๋ถ€์ž์—ฐ์Šค๋Ÿฌ์šด ์™ธ๊ด€)์„ ์ฒด๊ณ„์ ์œผ๋กœ ๋น„๊ตํ•  ์˜ˆ์ •์ž…๋‹ˆ๋‹ค.

๐Ÿ“’ ์œ ์šฉํ•œ ํŒ:

  • ์•ˆ์ •์ ์ธ ๊ฒฐ๊ณผ๋ฅผ ์›ํ•œ๋‹ค๋ฉด ์—ํฌํฌ๊ฐ€ 7 ์ดํ•˜์ธ LoRA๋ฅผ ์‚ฌ์šฉํ•˜์„ธ์š”. ์˜ˆ: V03E06. ๋‹ค๋งŒ, V03E10๊ณผ ๊ฐ™์€ ๊ณ ์—ํฌํฌ LoRA๋Š” ํ›ˆ๋ จ ์†Œ์Šค์™€์˜ ์œ ์‚ฌ์„ฑ์ด ๋” ๋›ฐ์–ด๋‚ฉ๋‹ˆ๋‹ค.

  • ๋Œ€๋ถ€๋ถ„์˜ ์ž‘์—…์€ Civitai(A1111 ๋ฐฑ์—”๋“œ)์—์„œ ์ƒ์„ฑ๋˜์—ˆ์Šต๋‹ˆ๋‹ค. ComfyUI ๊ธฐ๋ฐ˜ ์ƒ์„ฑ๊ธฐ๋ฅผ ์‚ฌ์šฉํ•˜๋Š” ๊ฒฝ์šฐ, ๊ธฐ์กด ํ”„๋กฌํ”„ํŠธ๋‚˜ ํŒŒ๋ผ๋ฏธํ„ฐ๋ฅผ ์žฌ์‚ฌ์šฉํ•˜์ง€ ๋ง๊ณ  ์ƒˆ๋กœ ์‹œ์ž‘ํ•˜๋Š” ๊ฒƒ์ด ์ข‹์Šต๋‹ˆ๋‹ค(ํƒœ๊ทธ์˜ ๋ชจ๋“  ๊ฐ€์ค‘์น˜ ๊ฐ’์„ ์ œ๊ฑฐํ•˜์„ธ์š”).

  • ๋จผ์ € ๋ฒ ์ด์Šค ๋ชจ๋ธ์„ ํ™•์ธํ•˜์„ธ์š”. Pony ๊ธฐ๋ฐ˜ LoRA๋Š” ๋Œ€๋ถ€๋ถ„์˜ SDXL ์ฒดํฌํฌ์ธํŠธ์—์„œ ์ž‘๋™ํ•˜์ง€ ์•Š์œผ๋ฉฐ, ๋ฐ˜๋Œ€๋„ ๋งˆ์ฐฌ๊ฐ€์ง€์ž…๋‹ˆ๋‹ค.

  • ์ผ๋ถ€ LoRA๋Š” ์—ฌ๋Ÿฌ ํŠธ๋ฆฌ๊ฑฐ ์ฝ”๋“œ(aaXXXxx, aaXXXxx ๋“ฑ)๋ฅผ ํฌํ•จํ•˜์—ฌ ๋‹ค๋ฅธ ์Šคํƒ€์ผ/์บ๋ฆญํ„ฐ๋ฅผ ๋‚˜ํƒ€๋ƒ…๋‹ˆ๋‹ค.

  • ์ตœ์ ์˜ ๊ฒฐ๊ณผ๋ฅผ ์–ป์œผ๋ ค๋ฉด ๋งค๋ฒˆ ํŠธ๋ฆฌ๊ฑฐ ๋‹จ์–ด๋ฅผ ์ตœ์†Œํ•œ์œผ๋กœ ์‚ฌ์šฉํ•˜์„ธ์š”;

  • CFG๋Š” 4.5(๋ณต์žกํ•œ ์žฅ๋ฉด)์—์„œ 7.5(๋‹จ์ˆœํ•œ ์žฅ๋ฉด) ์‚ฌ์ด๋กœ ์„ค์ •ํ•˜์„ธ์š”;

  • ์• ๋‹ˆ๋ฉ”์ด์…˜ ์Šคํƒ€์ผ์˜ ๊ฒฝ์šฐ, Euler a ์ƒ˜ํ”Œ๋Ÿฌ๋กœ 19๋‹จ๊ณ„๋ถ€ํ„ฐ ์‹œ์ž‘ํ•˜์„ธ์š”. ๊ฒฐ๊ณผ์— ๋งŒ์กฑํ•˜๋ฉด ๊ณ ํ•ด์ƒ๋„ ๋ณด์ •/์–ผ๊ตด ๋ณด์ •์„ ์‚ฌ์šฉํ•˜์—ฌ ํ’ˆ์งˆ์„ ํ–ฅ์ƒ์‹œํ‚ค๊ณ (Euler์„ 29๋กœ ์„ค์ •ํ•˜์„ธ์š”);

  • ์‚ฌ์‹ค์ ์ธ ์‚ฌ์ง„์˜ ๊ฒฝ์šฐ, DPM++2M Karras ์ƒ˜ํ”Œ๋Ÿฌ๋ฅผ ์‚ฌ์šฉํ•˜๊ณ , ๊ทผ์ ‘ ์–ผ๊ตด ์ดฌ์˜์€ 30๋‹จ๊ณ„ ์ด์ƒ, ์ „์‹  ์ดฌ์˜์€ 35๋‹จ๊ณ„ ์ด์ƒ์„ ๊ถŒ์žฅํ•ฉ๋‹ˆ๋‹ค.

  • ๋ชจ๋“  ์ƒ์„ฑ์— ๋Œ€ํ•œ ๋ณดํŽธ์ ์ธ ํ”„๋กฌํ”„ํŠธ/LoRA ๊ฐ€์ค‘์น˜๋Š” ์กด์žฌํ•˜์ง€ ์•Š์Šต๋‹ˆ๋‹ค. ์‚ฌ์‹ค์ ์ธ ์ฒดํฌํฌ์ธํŠธ์— ์• ๋‹ˆ๋ฉ”์ด์…˜ ์Šคํƒ€์ผ/์บ๋ฆญํ„ฐ LoRA๋ฅผ ์‚ฌ์šฉํ•  ๊ฒฝ์šฐ, LoRA ๊ฐ€์ค‘์น˜๋ฅผ 0.7 ๋“ฑ ๋‚ฎ์€ ๊ฐ’๋ถ€ํ„ฐ ์‹œ์ž‘ํ•˜์„ธ์š”. ์ƒ˜ํ”Œ ์ด๋ฏธ์ง€์— ํ‘œ์‹œ๋œ LoRA ๊ฐ€์ค‘์น˜๋Š” ์ตœ๊ทผ ๋ฒ„๊ทธ๋กœ ์ธํ•ด ์‹ค์ œ ๊ฐ’๊ณผ ๋ฌด๊ด€ํ•˜๊ฒŒ ํ•ญ์ƒ 1๋กœ ํ‘œ์‹œ๋ฉ๋‹ˆ๋‹ค.

  • ๋‹จ๊ณ„ ์ˆ˜ ์„ค์ •(๋ชจ๋“  ํƒœ๊ทธ์˜ ๊ฐ€์ค‘์น˜)์€ ํ”„๋กฌํ”„ํŠธ์˜ ๋ณต์žก์„ฑ๊ณผ ๋ฐ€์ ‘ํ•˜๊ฒŒ ๊ด€๋ จ๋˜์–ด ์žˆ์Šต๋‹ˆ๋‹ค. ๊ฒฐ๊ณผ์— ์†๊ฐ€๋ฝ์ด๋‚˜ ์‚ฌ์ง€ ๊ฐ™์€ ์ถ”๊ฐ€ ๋ฌผ์ฒด๊ฐ€ ๋‚˜ํƒ€๋‚œ๋‹ค๋ฉด, ๋‹จ๊ณ„ ๊ฐ’(๋ฐ LoRA ๊ฐ€์ค‘์น˜)์„ ๋‚ฎ์ถ”์„ธ์š”. ๋ฐ˜๋Œ€๋กœ, ๋ฌผ์ฒด๊ฐ€ ์‚ฌ๋ผ์ง€๊ฑฐ๋‚˜ ํ’ˆ์งˆ, ์งˆ๊ฐ, ํ˜„์‹ค๊ฐ์ด ๋–จ์–ด์ง„๋‹ค๋ฉด ๋‹จ๊ณ„ ๊ฐ’์„ ๋†’์ด์„ธ์š”.

  • ํ”„๋กฌํ”„ํŠธ๋ฅผ ์ž‘์„ฑํ•˜๊ณ  ์ƒ์„ฑ์„ ๊ธฐ๋‹ค๋ฆฌ๋Š” ๊ฒƒ์€ ๋ฏธ์Šคํ„ฐ๋ฆฌ ์†Œ์„ค์„ ํŽผ์ณ๋ณด๋Š” ๊ฒƒ๊ณผ ๊ฐ™์Šต๋‹ˆ๋‹ค. ๋‹ค์Œ์— ์–ด๋–ค ์ „ํ™˜์ ์ด ์˜ฌ์ง€ ์ „ํ˜€ ์˜ˆ์ธกํ•  ์ˆ˜ ์—†์Šต๋‹ˆ๋‹ค. ์ด๋Š” AI ๋ชจ๋ธ์˜ ๋ฌดํ•œํ•œ ๊ฐ€๋Šฅ์„ฑ์„ ํƒ์ƒ‰ํ•˜๋Š” ๋ฐฉ์‹์ž…๋‹ˆ๋‹ค. ์›ํ•˜๋Š” ์ •ํ™•ํ•œ ๊ฒฐ๊ณผ๋ฅผ ์–ป์œผ๋ ค๋ฉด ๊ฐ ํƒœ๊ทธ์— ์ ํ•ฉํ•œ ์–ดํœ˜๋ฅผ ์ฐพ์•„์•ผ ํ•˜๋ฉฐ, ๊ฐ ๋‹จ์–ด ์ž์ฒด๊ฐ€ ๋‹ค์–‘ํ•œ ๋™์˜์–ด๋ฅผ ๊ฐ€์ง„ ๋ชจํ˜ธํ•œ ๋ณ€ํ˜•์ž…๋‹ˆ๋‹ค.

  • ํ›ˆ๋ จ ์ž๋ฃŒ๋Š” ์ฃผ๋กœ ๋‹จ์ผ ์บ๋ฆญํ„ฐ์— ์ดˆ์ ์„ ๋งž์ถ”๊ณ  ์žˆ์œผ๋ฏ€๋กœ, ์ปคํ”Œ ์ด๋ฏธ์ง€๋ฅผ ์ƒ์„ฑํ•˜๋ ค ํ•  ๊ฒฝ์šฐ ์˜ˆ์ƒ์น˜ ๋ชปํ•œ ๊ฒฐ๊ณผ๊ฐ€ ๋‚˜์˜ฌ ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค. ์ด๋ฅผ ํ•ด๊ฒฐํ•˜๋ ค๋ฉด ์—ฌ๋Ÿฌ ์ธ๋ฌผ์„ ํฌํ•จํ•ด ํ›ˆ๋ จ๋œ ์ถ”๊ฐ€ LoRA(์˜ˆ: ExpressiveH)๋‚˜ ํฌ์ฆˆ LoRA๋ฅผ ์‚ฌ์šฉํ•ด์•ผ ํ•ฉ๋‹ˆ๋‹ค. ์ข‹์€ ๋‹ค์ธ LoRA๋Š” ์ปคํ”Œ, ์“ฐ๋ฆฌ์Šค, ๋˜๋Š” ๊ทธ๋ฃน์˜ ๋‹ค์–‘ํ•œ ํฌ์ฆˆ๋ฅผ ํฌํ•จํ•ด์•ผ ํ•˜๋ฉฐ, ์ด๋Š” ๋งค์šฐ ์–ด๋ ค์šด ์ž‘์—…์ž…๋‹ˆ๋‹ค.

๐Ÿ“’ ๋‹ค์Œ ๋ฒ„์ „์—์„œ ์ˆ˜์ •ํ•  ์‚ฌํ•ญ:

  1. Pony ๊ธฐ๋ฐ˜์œผ๋กœ ํ›ˆ๋ จํ•˜๋ฉด SDXL ๊ธฐ๋ฐ˜๋ณด๋‹ค ๋‹ค์–‘ํ•œ ๊ฒฐ๊ณผ๋ฅผ ์–ป์„ ์ˆ˜ ์žˆ์ง€๋งŒ, ํ”„๋กฌํ”„ํŠธ์— ์ธ๊ฐ„ 1๋ช…๊ณผ ๋™๋ฌผ 1๋งˆ๋ฆฌ๊ฐ€ ํฌํ•จ๋  ๊ฒฝ์šฐ Pony๋Š” ๋‘ ์ข…์„ ํ˜ผํ•ฉํ•˜๋Š” ๊ฒฝํ–ฅ์ด ๊ฐ•ํ•ฉ๋‹ˆ๋‹ค. source_pony, source_furry๋ฅผ ๋ถ€์ •์  ํ”„๋กฌํ”„ํŠธ์— ์ž…๋ ฅํ•ด๋„ ๋„์›€์ด ๋˜์ง€ ์•Š์Šต๋‹ˆ๋‹ค. ์ด ๋ฌธ์ œ๋ฅผ ํ•ด๊ฒฐํ•  ๋ฐฉ๋ฒ•์ด ์žˆ์„๊นŒ์š”?

  2. ํ›ˆ๋ จ ์ž๋ฃŒ ์ˆ˜๋Ÿ‰์„ ???๊ฐœ ์ดํ•˜๋กœ ์ค„์ด์„ธ์š”. ์ด๋Š” ์ œ LoRA ์ „์ฒด์— ๊ณตํ†ต๋œ ๋ฌธ์ œ๋กœ, ๋„ˆ๋ฌด ๋งŽ์€ ํ›ˆ๋ จ ์ด๋ฏธ์ง€๋Š” ๊ฒฐ๊ณผ ํ’ˆ์งˆ์„ ์ €ํ•˜์‹œํ‚ต๋‹ˆ๋‹ค. ์†Œ์Šค ์ด๋ฏธ์ง€์˜ ํ’ˆ์งˆ์ด ๋” ์ค‘์š”ํ•ฉ๋‹ˆ๋‹ค.

  3. ํ›ˆ๋ จ ์†Œ์Šค ํ•ด์ƒ๋„๋ฅผ ๋†’์ด์„ธ์š”.

  4. ํ›ˆ๋ จ ๋‹จ๊ณ„๋ฅผ 1000์œผ๋กœ ์ค„์ด์„ธ์š”. ๋‚ฎ์€ ์—ํฌํฌ LoRA๊ฐ€ ๋” ์•ˆ์ •์ ์ธ ๊ฒฐ๊ณผ๋ฅผ ์ œ๊ณตํ•œ๋‹ค๋Š” ๊ฒƒ์„ ํ™•์ธํ–ˆ์Šต๋‹ˆ๋‹ค.

๐Ÿ“’ Illustra V04E03 ์ฒดํฌํฌ์ธํŠธ ํ‰๊ฐ€

์ด LoRA ๋ณตํ•ฉ์ฒด๋Š” 11๊ฐœ(๋ชฉํ‘œ๋Š” 100๊ฐœ)์˜ ๊ณ ์œ ํ•œ ์Šคํƒ€์ผ๊ณผ ํฌ์ฆˆ๋ฅผ ํฌํ•จํ•ฉ๋‹ˆ๋‹ค. ํ˜„์žฌ ์ด LoRA ๋ณตํ•ฉ์ฒด์— ์ถ”๊ฐ€ํ•  ์•„์ด๋””์–ด ๋ชฉ๋ก์ด ์žˆ์Šต๋‹ˆ๋‹ค. ์†Œ์Šค ์ด๋ฏธ์ง€๋ฅผ ์ค€๋น„ํ•˜๋Š” ๋ฐ ์—„์ฒญ๋‚œ ์‹œ๊ฐ„์ด ์†Œ์š”๋ฉ๋‹ˆ๋‹ค. ๊ฐ LoRA๋Š” ๊ธ€๋ฆฌ์น˜๋ฅผ ์ˆ˜์ •ํ•˜๊ธฐ ์œ„ํ•ด 2~15ํšŒ ๋ฐ˜๋ณต์ด ํ•„์š”ํ•ฉ๋‹ˆ๋‹ค. ์ถœ์‹œ ์ „์— ์˜จ๋ผ์ธ์— ์กด์žฌํ•˜๋Š” ๋ชจ๋“  ์ฒดํฌํฌ์ธํŠธ๋กœ LoRA๋ฅผ ํ…Œ์ŠคํŠธํ•˜๊ณ  ์‹ถ์ง€๋งŒ, ์ œ๊ฐ€ ์‚ฌ์šฉํ•˜๋Š” ๋ฒ„์ฆˆ๊ฐ€ ๊ธˆ๋ฐฉ ๋ฐ”๋‹ฅ๋‚˜ ๋ฒ„๋ ธ์Šต๋‹ˆ๋‹ค. ๊ด€์‹ฌ์ด ์žˆ๋‹ค๋ฉด ๋ฒ„์ฆˆ๋ฅผ ๊ธฐ๋ถ€ํ•ด ์ฃผ์„ธ์š”.

๐Ÿ“’ ๋ฏธ๋Ÿฌ๋ง

Modelslab ๋ฐ yodayo์™€ ๊ฐ™์€ ๋ช‡๋ช‡ ์‚ฌ์ดํŠธ๊ฐ€ ์ œ ๋ชจ๋ธ์„ ๋ด‡์œผ๋กœ ๋ฏธ๋Ÿฌ๋งํ•˜๊ณ  ์žˆ์Œ์„ ํ™•์ธํ–ˆ์Šต๋‹ˆ๋‹ค. ํŠนํžˆ SeaArt๋Š” ๋‹ค์šด๋กœ๋“œ ๋ฐ ์ƒ์„ฑ ์ˆ˜์น˜๊ฐ€ ๋งค์šฐ ๋†’์Šต๋‹ˆ๋‹ค.

  1. ๋ชจ๋ธ์„ ๋ฏธ๋Ÿฌ๋งํ•˜๋Š” ๊ฒƒ์—๋Š” ๋ฌธ์ œ๊ฐ€ ์—†์Šต๋‹ˆ๋‹ค. civitaiarchive์™€ ๊ฐ™์€ ์‚ฌ์ดํŠธ๋Š” ํ•ญ์ƒ ๊ทธ๋ ‡๊ฒŒ ํ•ด์™”์Šต๋‹ˆ๋‹ค.

  2. ์‚ฌ์šฉ์ž๊ฐ€ ๋ชจ๋ธ์„ ๋‹ค์šด๋กœ๋“œํ•˜๋Š” ๊ฒƒ์„ ์ฐจ๋‹จํ•˜๊ณ  ์œ ๋ฃŒ ์˜จ๋ผ์ธ ์„œ๋น„์Šค๋กœ ์œ ๋„ํ•˜๋Š” ๊ฒƒ์€ ์ €์—๊ฒŒ ๋ฌธ์ œ๊ฐ€ ๋ฉ๋‹ˆ๋‹ค.

  3. ์ €์ž‘๊ถŒ์„ ์ฃผ์žฅํ•˜๊ฑฐ๋‚˜ ์‚ฌ์šฉ์ž์—๊ฒŒ ์ƒ์„ฑ๋ฌผ์˜ ์†Œ์œ ๊ถŒ์„ ๋ถ€์—ฌํ•˜๋Š” ๊ฒƒ๋„ ๋ฌธ์ œ๊ฐ€ ๋ฉ๋‹ˆ๋‹ค. ์ด ๋ชจ๋ธ๋“ค์€ ์˜คํ”ˆ์†Œ์Šค ๊ธฐ๋ฐ˜์œผ๋กœ, ์ œํ•œ๋œ ์†Œ์œ ๊ถŒ ๋ฐ์ดํ„ฐ๋กœ ํ›ˆ๋ จ๋œ ์˜คํ”ˆ์†Œ์Šค ๋ชจ๋ธ์ž…๋‹ˆ๋‹ค. ๋ˆ„๊ตฌ๋„โ€”โ€”์ €๋ฅผ ํฌํ•จํ•˜์—ฌโ€”โ€”์ €์ž‘๊ถŒ์„ ์ฃผ์žฅํ•  ์ˆ˜ ์—†์Šต๋‹ˆ๋‹ค. ๊ฐ์‚ฌ์˜ ํ‘œํ˜„๋งŒ์œผ๋กœ ์ถฉ๋ถ„ํ•ฉ๋‹ˆ๋‹ค.

์ด ๋ชจ๋ธ๋กœ ๋งŒ๋“  ์ด๋ฏธ์ง€

์ด๋ฏธ์ง€๋ฅผ ์ฐพ์„ ์ˆ˜ ์—†์Šต๋‹ˆ๋‹ค.