Wan2.1-VACE GGUF Workflow for "Free Length" ref2video using For Loop (version 4)

설명:

원본 영상의 "길이"와 "루프 횟수"를 지정하여 원하는 길이의 영상을 생성할 수 있습니다.

위에 언급된 내용을 포함한 "주 설정"의 매개변수 외에는 별도의 조정이 필요 없습니다.

이 작업을 가능하게 해준 @BenjisAIPlayground(https://www.youtube.com/@BenjisAIPlayground)에게 감사드립니다.

기능 (수정을 원하는 사용자向け):

첫 번째 참조 이미지(ref image)는 영상의 시작 프레임과 구성에 맞추기 위해 Flux Kontext 또는 유사한 이미지를 사용하는 것이 최적입니다. 그러나 제 의견으로는 추적 성능이 우수하여 Wan2.1 VACE를 문제 없이 사용할 수 있습니다.
청크 크기("길이"로 지정됨)는 입력 및 출력 프레임 수에 영향을 미치며, 첫 번째 루프와 그 이후 루프 간에도 차이가 발생합니다. 저는 출력 프레임 수를 항상 "길이-1"로 조정했습니다.
참조 이미지(ref image)의 색상이 각 루프마다 과포화되는 현상을 발견하여, 루프 입력 직전의 최신 참조 이미지를 사용하여 색상 매칭을 수행했습니다.
출력 영상은 30fps를 전제로 합니다. 예를 들어 입력 영상을 60fps로 처리할 경우 "nth" 값을 조정하세요.

(v3.0 → v4.0)

개선 (?):

참조 영상 배경/객체 사용 시(CN:DWPose 활용), CN 제어선이 최종 출력에 나타나지 않도록 CN 전용 새로운 WanVaceToVideo를 설정했습니다.

(버전 3.0 대비 품질이 명확히 개선되었는지는 불확실합니다. 피드백을 기다립니다.)

(v2.0 → v3.0)

개선:

영상 배경 사용 시(SAM 마스크 활용), CN(DWPose) 요소를 주입하여 출력 품질을 향상시켰습니다.
참조 이미지 배경 사용 시(ControlNet 활용), CN을 더 정밀하게 설정할 수 있으며, Depth를 추천합니다.
위 내용과 관련하여, "주 설정"의 설정을 조정할 수 있으며, 프롬프트 내에서 배경을 명시하는 경우도 포함됩니다(“How to Select#” 참고).
프롬프트 생성 지원 기능(ollama 활용)을 추가했습니다.

(v1.0 → v2.0)

개선:

버그 수정: