(NSFW) Dead-Simple MMAudio + RIFE Interpolation Setup for WAN 2.2 I2V 14B

변경 로그

버전 1.0.1: 우연히 RIFE 그룹 출력이 8fps로 설정되었습니다. 이를 24fps로 변경했습니다.

버전 1.0: 초기 릴리즈

모든 군인들에게 바치는 경의

이것은 제가 지금까지 쓴 첫 번째 기사이므로, 실수했다면 죄송합니다. 오류가 있거나 도움이 필요하면 댓글을 남겨주세요. 참고로 저는 다음 환경에서 실행 중입니다:

그리고 여기에 사용된 커스텀 노드(총 3개)입니다:

ComfyUI-VideoHelperSuite 1.7.7 (https://github.com/Kosinkadink/ComfyUI-VideoHelperSuite)
ComfyUI-MMAudio Nightly (https://github.com/kijai/ComfyUI-MMAudio)
ComfyUI-VFI 알 수 없음 (https://github.com/GACLove/ComfyUI-VFI)
- 다른 많은 사용자들이 사용하는 더 인기 있는 RIFE 커스텀 노드가 있을 것 같은데, 저는 보간 비율을 분수로 설정하는 방법(16 → 24fps는 1.5배 보간)을 찾지 못했습니다. 하지만 이 노드는 이를 가능하게 해줍니다.

이제 워크플로우로 들어가겠습니다...

------------------------------------

이 워크플로우는 두 가지 작업을 처리합니다:

설정은 플러그 앤 플레이 방식입니다. WAN 비디오를 넣기 → 보간하기 → MMAudio에 입력하기 → 동기화된 출력 얻기. 포함된 설명은 FPS, 스텝 설정 및 시드 동작의 이유를 설명합니다.

이 워크플로우에서 다루는 내용:

RIFE를 통한 16 → 24fps 보간.
권장 설정(50 스텝, cfg 4.5)을 적용한 MMAudio 샘플러.
자동으로 24fps로 오디오 + 비디오 결합.
30fps 이상의 출력을 원할 경우 후속 재보간 옵션.
1. 완성된 24fps 비디오를 'Step 1: Rife Interpolation' 그룹에 연결하고, 'source_fps'를 24로, 'target_fps'를 30으로 변경만 하면 됩니다.

다음 파일들을 모두 다음 디렉터리에 다운로드하세요:

ComfyUI/models/mmaudio

MMAudio NSFW 모델 (베이스 모델 기반 세밀 조정)

MMAudio VAE (fp16)

MMAudio Synchformer (fp16)

MMAudio CLIP 인코더 (fp16)

좋은 MMAudio 트랙을 생성한 후, 원하는 결과에 따라 추가로 할 수 있는 몇 가지 단계가 있습니다.

오디오/비디오를 어떤 소프트웨어(CapCut/Shotcut 등)에 가져와 배경에 음악을 추가하세요. 저는 몇 개의 영상에서 이 방법을 사용했습니다. 음악이 약간 탁하고 배경에서 재생되는 것처럼 보이도록 '라디오' 필터를 적용했습니다.
NSFW 오디오 트랙과 다른 오디오 트랙을 겹쳐 사용하세요. KaptainSisay가 이와 유사한 작업을 매우 우아하게 수행한 예시를 여기서 볼 수 있습니다(https://civitai.com/images/110700679).