ComfyUI_INTEL_LOWVRAM_WAN2.2_ADD_AUDIO

이 테스트 워크플로우는 MMAUDIO를 사용하여 생성했으며, Comfy Manager에서 찾을 수 있습니다.

다음은 필요한 모든 모델, VAE 및 기타 항목입니다.

https://huggingface.co/Kijai/MMAudio_safetensors/tree/main

필요에 따라 GitHub 링크도 제공합니다.

https://github.com/kijai/ComfyUI-MMAudio/tree/main/mmaudio

이것은 새로운 실험적 기능이므로 이상한 현상이 발생할 수 있습니다.

NVIDIA가 아닌 환경에서 사용하는 경우, 다음 두 가지를 꼭 수행하세요.

저는 몇 가지 수정을 통해 이 워크플로우를 성공적으로 실행했습니다. Intel Arc B580을 사용 중이므로 CUDA를 이용할 수 없습니다.

CPU를 사용할 수 있도록 두 파일을 수정했습니다. ComfyUI\custom_nodes\comfyui-mmaudio\nodes.py에서 77번째와 78번째 줄을 다음과 같이 변경했습니다.

clip_frames = torch.stack([clip_transform(frame.cpu()).to("cpu") for frame in clip_frames])
sync_frames = torch.stack([sync_transform(frame.cpu()).to("cpu") for frame in sync_frames])

ComfyUI\custom_nodes\comfyui-mmaudio\mmaudio\ext\autoencoder\vae.py에서 cuda가 언급된 네 위치를 모두 cpu로 변경했습니다.

테스트에서는 작동했지만, 긴 영상을 생성해보지 않아 어떤 정도의 성능을 발휘할지는 확신할 수 없습니다.