Video upscale/refine with Wan2.2

세부 정보

파일 다운로드

모델 설명

기본적으로 비디오에서 비디오로 변환합니다. 하지만 노이즈 제거 대신 단계를 건너뛰었습니다(즉, 정교화입니다).

물론 Lightx2v LoRA - Wan2.2-T2V-A14B-4steps-lora-250928를 사용하고 있지만, 움직임 문제는 여기서 문제가 되지 않기 때문에 어떤 Lightx2v LoRA라도 잘 작동합니다.

수정하고 싶은 내용의 양에 따라 1단계 또는 2단계를 사용할 수 있습니다. 최종 단계도 변경 정도에 영향을 줍니다. 4단계보다 큰 단계를 사용할수록 변경 폭이 작아집니다(말 예제를 확인하세요).

  • 단계 3,4: 큰 변화
  • 단계 5: 일부 변화
  • 단계 9,10: 작은 변화
  • 단계 10: 매우 작은 변화
    등등

물론 2단계를 사용하면 KSampler가 2배 더 오래 걸립니다.

  • 예시: 왼쪽에 업스케일된 결과, 왼쪽 상단에는 사용된 단계 정보가 표시됨

  • 예시(동시에 2개의 동영상)는 렌더링 시 메모리 문제로 다운스케일됨

  • 일반적인 T2V가 할 수 없는 내용(예: 생식기 등)이 있다면 T2V LoRA를 추가하세요

  • 프롬프트는 선택 사항이지만, 동영상에 무엇이 있는지 간단한 태그를 추가하는 것이 좋습니다

  • 최종 선명화 단계에서 업스케일러가 흐릿한 부분을 확대하지 않도록 비디오를 다운스케일합니다

  • 내 4090 24GB는 약 300초 내에 1메가픽셀, 120프레임의 비디오를 업스케일할 수 있습니다

  • 워크플로우는 ⚡ Rife Tensorrt를 사용하며, 매우 강력히 추천합니다. 일반적인 프레임 보간에 비해 무척 빠릅니다(약 10배). 첨부한 bat 스크립트는 ComfyUI-Rife-Tensorrt 폴더 내에서 텐서 파일 생성을 실행하기 위해 사용한 것입니다(ComfyUI 포터블용). 먼저 rife49_ensemble_True_scale_1_sim.onnx 파일을 "ComfyUI-Rife-Tensorrt/models" 폴더에 다운로드한 후, 이 bat 스크립트를 ComfyUI-Rife-Tensorrt 폴더에 배치하세요.

  • 메모리를 모니터링하고, 공유 VRAM에 어떤 데이터라도 유출되면 Comfy를 종료하고 해상도를 더 작게 변경한 후 다시 시도하세요.

업스케일러 링크 - 2x-NomosUni_span_multijpg - OpenModelDB

이 모델로 만든 이미지

이미지를 찾을 수 없습니다.