🚨 Hunyuan - Triple LoRA - Fast Workflow - RAM offload (720p on 3090) BY BIZARRO🚨

업데이트: 노트와 사용자 경험을 개선했습니다. 여러분의 의견을 알려주세요.

또한, 이 모델을 업로드하고 태그하는 모든 분들에게 버즈를 기부할 예정이니, 아름다운 작품을 저에게 보여주세요! :)

V1.5 720P 출시: 이전 버전 정보는 아래에 있습니다.

---

ComfyUI-MultiGPU를 추가했습니다. 이 도구는 혁명적입니다! 이 개선 덕분에 기존에는 불가능했던 해상도로 Hunyuan을 실행할 수 있습니다. 제 워크플로우의 성능은 이미 안정적이었지만, 이 도구를 추가하고 sage attention을 활성화한 결과, 다음과 같은 생성 속도를 달성했습니다:

3090, 24GB VRAM. 97프레임, 24fps, 두 개의 LoRA 로드.

720x480: 217초 (3.6분)
960x544: 362초 (6분)
1240x720: 800초 (13분)

sage 설치법을 가르쳐준 firemanbrakeneck에게 감사드립니다. 아래 가이드가 필요하지만, 설치가 매우 귀찮습니다.

https://www.reddit.com/r/StableDiffusion/comments/1h7hunp/how_to_run_hunyuanvideo_on_a_single_24gb_vram_card/

이 플러그인의 창조자이자, 제 워크플로우에 구현하고 세밀하게 조정해준 Silent-Adagio-444에게도 전적인 감사의 말씀을 드립니다.

지침은 가능한 한 단순하고 간결하게 제공하겠습니다. 시스템에 따라 노드 설정을 실험해보셔야 합니다.

지침:

1. Comfy Manager 또는 Git을 통해 ComfyUI-MultiGPU를 설치하세요.

2. ComfyUI-GGUF (필수!)를 설치하세요.

3. 이 링크에서 GGUF 버전의 LLM을 다운로드하고, Unet 폴더에 넣으세요.

4. UnetLoaderGGUFDisTorchMultiGPU를 설정하세요. 저는 4.5로 설정했지만, VRAM이 적은 카드를 사용한다면 이 값을 높여야 할 수 있습니다. 시스템에 최적화된 값을 실험해보세요.

이 설정은 제 시스템: RTX 3090 (24GB VRAM), 64GB RAM에 최적화되었습니다.
당신의 하드웨어에 맞춰 설정을 조정해야 합니다.

720p를 위해 저는 Fast Hunyuan GGUF Q4_K_M을 사용합니다.

할당한 VRAM이 적을수록 속도가 느려집니다. 자유로운 점심은 없습니다!
자신의 환경에 최적의 균형점을 찾아보세요.

워크플로우 및 이전 버전에 대한 일반 정보:

안녕하세요, 수많은 시간을 투자해 최적화한 후, 허니완에서 최대 품질과 성능을 끌어내는 데 사용하는 워크플로우를 공유하게 되어 기쁩니다. 저는 Bizarro입니다.

이 워크플로우는 이 유튜버의 워크플로우를 기반으로 하며, 저는 수주간 설정을 조정해 최고의 품질을 달성했습니다.

또한, 여러 LoRA를 사용할 때 발생하던 많은 문제를 마침내 해결했습니다! 🚀 품질을 잃지 않고 최대 세 개의 LoRA를 혼합할 수 있으며, 동일한 장면에 여러 캐릭터를 배치할 수 있습니다. 두 개를 사용할 때 가장 좋지만, 예제에서는 세 개를 사용했습니다 (Bizarro LoRA, 원더 우먼 LoRA, 타노스 LoRA).

명확히 설명드리자면, 예제 생성은 운이 좋았습니다. 첫 시도였고, 이후 일관된 결과를 얻기 위해 LoRA를 조절하는 것이 어렵다는 것을 알게 되었습니다. 하지만 이 워크플로우는 매우 빠르고 결과가 매우 훌륭합니다. 더 많은 예제를 만들면 추가할 예정입니다. LoRA 스타일과 LoRA 캐릭터를 결합하는 데도 훌륭하게 작동합니다.

프롬프트를 정확히 작성해야 합니다. 캐릭터의 인종, 옷, 체형, 프레임 내 위치 등을 상세히 설명하세요.

이 워크플로우는 3090에 최적화되어 있으며, 960x544 해상도에서 97프레임을 8분 이내로 생성할 수 있습니다. VRAM이 적은 카드를 사용한다면, 더 작은 GGUF 버전을 사용하거나 품질을 480p로 낮춰보세요.

[더 많은 실험을 보려면 X에서 저를 팔로우하세요

저는 하루종일 영상 생성에 대해 떠들며, 동시에 재미있는 영상도 제작합니다.]

제가 사용하는 GGUF 버전은 여기서 다운로드 가능합니다: 여기:

다양한 LoRA 노드를 시도했지만 모두 별로였습니다. 마침내 이 노드를 발견했을 때 비로소 해결되었습니다:

모드를 "In Order"로 설정하세요. 원하는 LoRA를 선택하고, 각 캐릭터를 정확한 트리거 단어로 상세히 설명하세요.

여러 LoRA 가중치는 디노이징 과정의 각 단계에 해당하며, 각 단계에서 LoRA의 영향력을 조절합니다. 초기 단계에서 높은 가중치는 전체 구조를 형성하고, 후기 단계에서는 세부 사항을 정교하게 조정합니다. 이를 통해 LoRA의 효과를 균일하게 적용하지 않고, 이미지 또는 영상 생성 과정 전반에 걸쳐 역동적으로 조절할 수 있습니다.

두 캐릭터에는 매우 잘 작동하며, 인내심을 가지고 있다면 세 캐릭터도 가능합니다.

이 방법은 캐릭터뿐만 아니라 모든 종류의 LoRA에 적용할 수 있습니다.

감각적인 결과를 보여주셨다면 정말 기쁠 것입니다!

사랑을 담아,

Mr. Bizarro