나는 SF 쇼를 보다가 한 장면을 보고 생각하게 됐다... 단일 5초 장면으로 LORA를 학습시킬 수 있을까?

답변: "물론이죠! 왜 안 되죠!?"

젤라틴 덩어리에 갇히다

왜 그런지 묻지 마라... '어떻게'를 묻자! 덩어리가 완성되면 왜 그런지 설명할 테니, 스포일러 경고: 덩어리는 결코 완성되지 않는다.

나는 단일 장면만을 가지고 작업했기 때문에, 캡션을 다양하게 변경하고, 동영상을 수평으로 뒤집고, 색상을 이동시키며, 자르기 조정도 해봤다. 결과는 예상치 못하게 쓸모 있는 LORA가 되었다!

와일드카드 프롬프트

아름다운 {러시아|프랑스|스웨덴|스위스|아프리카|라틴아메리카|오스트리아|네덜란드|영국|미국|시베리아|중국|우크라이나|태국|체코} 여성은 {녹색|투명|노란색|빨간색|파란색|분홍색|흰색|검정색|다색} 젤라틴 덩어리에 갇혀 있고, 머리와 어깨만이 표면 위에 드러나 있다.

그녀는 {매우 긴|긴|어깨 길이}의 {금발|갈색|더티 블론드|검정|적갈색} 머리를 가지고 있다.

그녀는 {기쁨에 외치고|매우 놀라서 충격에 빠졌고|이마를 찌푸리며 이를 악물고|머리를 뒤로 젖히고} 있다.

그들은 {문이 뒤쪽으로 열린 텐트 안에 있으며, 그 뒤에 {눈 덮인 산봉우리|밀림|이 보이고}|해변에 놓인 타월 위에 있거나|{큰|작은} {레드 벨벳|파란색|분홍색|흰색|사변형} 침대 위에 있거나|{하얀색|검정색|파란색|빨간색|분홍색|보라색|갈색} 소파 위에 있거나|카펫 위에 있거나|지하실의 푸틴 위에 있거나|몰 안에 있거나|카니발에서|연극 무대 위에 있거나|건물 안 헛간의 건초 위에 있거나|배송 트럭 뒷좌석에 있다}.

조명은 {밝은|부드러운|배경은 어두운|따뜻한} 느낌이다.

그 외에 내가 적용한 유일한 트릭은 192x192의 저해상도로 학습하는 것이었다. 이 방식은 HunyuanVideo가 세부 사항에 얽매이지 않고 윤곽을 학습하도록 도와주어, 렌더링 시 모델의 일반화에 도움이 된다. 또한 데이터셋이 제한적이었기 때문에 드롭아웃 비율을 0.15로, 그동안 내가 사용한 것보다 높게 설정했다.

면책조항

blob