빠른 업데이트: 이 LoRA는 여전히 매우 실험적이며 좋은 결과를 얻는 것이 어려울 수 있음을 인지해 주세요. 저는 훈련 및 워크플로우를 개선하기 위한 방법을 계속 탐색할 예정입니다. 결과에 이상한 점이 있거나 훈련이나 워크플로우 개선에 대한 제안이 있다면 언제든지 알려주세요.

Boreal-HL: 심심한 현실 Hunyuan LoRA

이 모델은 Hunyuan 동영상의 현실감 있는 디테일을 개선하기 위한 저의 첫 시도입니다. 얕은 심도 효과 없이 더 자연스러운 배경을 생성하고, 피부 질감을 향상시키며, 더 사실적인 조명과 장면 전반의 디테일 증가에 중점을 둡니다.

저는 이전에 훈련한 다른 '심심한 현실' 모델들과 마찬가지로, 가능한 한 다양한 공공 도메인 및 AI 생성 사진을 사용하는 방식을 따랐습니다.

이 LoRA 사용 시 주의사항:

이 LoRA는 매우 과도하게 훈련되었습니다. 대부분의 경우 강도를 약 0.6으로 유지하는 것이 적절합니다. 일부 프롬프트, 시드 등은 더 높은 강도를 사용해 더 나은 품질을 낼 수 있지만, 결과가 일관되지 않습니다.

지금까지 이 LoRA는 Hunyuan AllinOne 워크플로우에서만 테스트했습니다. Hunyuan 워크플로우 및 모델 훈련 초기 단계이기 때문에 향후 더 많은 개선 여지가 있습니다.

초기 권장 설정:

• LoRA 강도: 0.6 (이 LoRA를 주로 사용하는 경우 0.4~0.9 범위에서 작업했습니다)

• 해상도: 해상도는 512x768 정도로 시작하고 1.5배 확대를 권장합니다. 확대를 사용하지 않는 경우 더 높은 해상도를 적용하세요. 세로 비율은 더 '심심한 현실감'을 주고, 가로 비율은 더 영화적인 분위기를 줍니다.

• 가이던스: 초기에는 12.5 정도의 높은 가이던스를 사용하세요. 이는 많은 왜곡을 방지하지만, 동일한 얼굴이나 동일한 장면이 반복되는 문제가 발생할 수 있습니다. 저는 더 흥미로운 이미지/동영상을 위해 가이던스를 3.5까지 낮추는 것을 선호하지만, 왜곡되지 않은 결과를 얻기 위해 시드/해상도/LoRA 강도를 신중히 조정해야 합니다.

• 스탭: 적어도 이 워크플로우에서는 최소 30스탭 이상을 권장합니다. 55스탭 정도로 늘리면 더 나은 결과를 얻을 수 있습니다.

• 시드: 일부 시드는 다른 시드보다 훨씬 더 좋은 결과를 낼 수 있으므로, 시드를 자주 변경해 보세요.

• 프롬프트 추천: 장면 내 실제 사물과 행동에 대해 가능한 한 구체적으로 기술하세요. 충분한 정보를 제공하지 않으면 지루한 배경이나 항상 동일한 캐릭터가 나오게 됩니다.

일반적으로 왜곡 문제가 발생할 경우, 가이던스를 올리고, 시드를 변경하고, LoRA 강도를 줄이고, 스탭을 늘리고, 프롬프트를 더 구체적으로 작성하며, 해상도를 높이는 것이 도움이 됩니다.

일반적으로 AI의 일반적인 느낌이나 동일한 캐릭터 반복을 줄이려면, 가이던스를 낮추고, LoRA 강도를 약간 올리고, 프롬프트를 더 구체적으로 작성하며, 시드를 변경해 보세요.

또한, 이 LoRA를 다른 모션 중심 LoRA와 결합하면 동영상 출력의 안정성이 향상될 수 있습니다.

이미지 생성 능력

이 LoRA는 종종 첫 번째 프레임을 통해 양질의 이미지도 생성할 수 있습니다. 때로는 긴 동영상에서 프레임을 추출한 것보다 더 왜곡된 결과가 나올 수 있으므로, 위에 언급한 설정들을 실험적으로 조정해 보세요. 저는 Hunyuan이 다음 세대 최고의 텍스트-이미지 모델이 될 잠재력을 매우 많이 가지고 있다고 생각합니다. 다만 이를 더 잘 활용할 수 있는 워크플로우를 찾고, 모델 훈련을 개선하기까지는 시간이 더 필요할 것입니다.

추가 정보

LoRA의 다양한 측면을 더 잘 보여주기 위한 동영상입니다.