Stable Video Diffusion (SDV) Workflow ComfyUI
세부 정보
파일 다운로드
모델 설명
Stable Video Diffusion (원래 Stability 릴리즈)
현재 이 글을 작성하는 시점에서 이미지에서 비디오로 변환하는 체크포인트가 두 가지 있습니다. 아래는 각각 14프레임 비디오 생성에 최적화된 체크포인트와 25프레임 비디오용 체크포인트의 공식 링크입니다. 이 파일들을 ComfyUI/models/checkpoints 폴더에 저장하세요.
이미지에서 비디오로 변환하는 모델을 가장 기본적으로 사용하는 방법은, 아래 워크플로우와 같이 14프레임 모델을 사용할 때 초기 이미지를 제공하는 것입니다. 이 웨브피 애니메이션 이미지를 다운로드하여 로드하거나, ComfyUI에 드래그하면 워크플로우를 얻을 수 있습니다.
파라미터 설명:
video_frames: 생성할 비디오 프레임 수입니다.
motion_bucket_id: 값이 높을수록 비디오에 더 많은 움직임이 포함됩니다.
fps: fps 값이 높을수록 비디오가 더 부드럽게 재생됩니다.
augmentation level: 초기 이미지에 추가되는 노이즈의 양입니다. 값이 높을수록 비디오가 초기 이미지와 덜 유사해집니다. 더 많은 움직임을 원한다면 이 값을 높이세요.
VideoLinearCFGGuidance: 이 노드는 이러한 비디오 모델의 샘플링을 약간 개선합니다. 기능은 각 프레임마다 CFG 값을 선형으로 조정하는 것입니다. 위 예시에서는 첫 번째 프레임은 CFG 1.0(노드의 min_cfg), 중간 프레임은 1.75, 마지막 프레임은 2.5( sampler에서 설정한 cfg)가 됩니다. 이를 통해 초기 프레임에서 멀어질수록 점차 높은 CFG 값을 적용하게 됩니다.
다시 게시됨, 다음에서 사용 가능:
https://huggingface.co/stabilityai/stable-video-diffusion-img2vid-xt/tree/main