Wan AnyFrame2Video with VACE

이름이 암시하는 대로 작동합니다.

시작 및 종료 프레임, 중간 단일 프레임, 시작->33%->66%->종료와 같은 어떤 프레임 조합도 설정할 수 있습니다.

네이티브 및 KJ의 Wrapper 솔루션을 제공하지만, 어떤 이유에서인지 네이티브는 작동하지 않습니다.

Wflow는 세 부분으로 구성됩니다:

1. 키프레임 설정

2. 네이티브 VACE

3. Wan Wrapper VACE

프레임은 원하는 대로 설정할 수 있지만, 마스크는 키프레임과 일관되게 유지해야 합니다—배치 내 위치가 같아야 합니다. 기본적으로, 키프레임을 VACE로부터 비어 있는 마스크로 보호하고 참조용으로 사용할 수 있도록 해야 합니다. 예제 .zip 파일에는 네 개의 이미지로 나누어 키프레임으로 사용되는 이미지 그리드가 포함되어 있으며, 그 사이의 간격은 비어 있는 프레임으로 채워져 있습니다. 이는 Wflow에서 유일하게 관련된 부분이며, 나머지는 예제 파일에서 확인할 수 있습니다.

네이티브 VACE와 Wan Wrapper VACE는 기능적으로 동일하며, 단지 구현 방식만 다릅니다—둘 중 하나를 사용하세요. 프롬프트를 입력하고 실행 버튼을 누르세요. 생성 속도를 높이기 위해 CausVid 및 AccVideo LoRAs가 사용되며, 이는 품질에 일부 손실이 따르지만 KJ의 Hugging Face 저장소에서 제공합니다.

현재 네이티브는 작동하지 않습니다(또는 시작-종료 프레임만 작동하고 나머지는 작동하지 않습니다).

WanWrapper는 별도의 VACE 모듈을 가지고 있으며(KJ의 저장소에서 가져오세요), 이는 Phantom 및 MoviiGen과 같은 다양한 파인튜닝과 함께 사용할 수 있어 더 선호되고 우수한 선택입니다.

KJ의 VACE 및 t2v: https://huggingface.co/Kijai/WanVideo_comfy/tree/main

VACE gguf: https://huggingface.co/QuantStack/Wan2.1-VACE-14B-GGUF/tree/main

VACE 네이티브: https://huggingface.co/Comfy-Org/Wan_2.1_ComfyUI_repackaged/tree/main/split_files/diffusion_models