Animatediff Simple Prompt Traveling

사용법

프롬프트를 조정하고 생성하세요.

설명

이것은 오래된 내용입니다. AnimateDiff는 오프라인용 비디오 AI 솔루션 중 최초 중 하나였으며, 여기서 제공되는 것은 가장 기본적인 워크플로입니다. 다른 AnimateDiff 워크플로의 기반이 됩니다.

이 워크플로는 AnimateDiff를 사용한 프롬프트 이동을 다룹니다. 다양한 키프레임마다 서로 다른 프롬프트를 선택하면, 비디오 내에서 프롬프트가 서로 점진적으로 변환됩니다.

두 가지 워크플로가 제공됩니다. 하나는 AnimateDiff 2 및 3용이고, 다른 하나는 AnimateDiff 2를 기반으로 한 AnimateLCM용입니다.

AnimateDiff와 Stable Diffusion 1.5는 함께 사용될 때 512픽셀 크기로 학습되었습니다. 따라서 생성 크기를 이 이상으로 크게 늘리지 않는 것이 좋습니다. 그렇지 않으면 결과가 일관되지 않게 됩니다. 대신 생성 후에 업스케일링을 시도할 수 있습니다.

두 워크플로 모두 업스케일링 기능을 포함하고 있지만, 별도의 워크플로에서 두 번째 Ksampler를 사용하여 업스케일링하는 것을 권장합니다. 자세한 내용은 다음 기사를 참고하세요:

https://www.tomgoodnoise.de/index.php/video-upscaling-in-comfyui/

시간

6초 길이, 해상도 1280 x 720(간단한 AI 업스케일링 사용)인 예제는 16GB VRAM을 갖춘 4060 TI에서 2분 30초 만에 완료되었습니다. 그러나 이는 최적의 업스케일링 방법을 사용하지 않습니다.

요구 사항

이 워크플로는 과거 8GB VRAM으로 개발되었습니다. 그러나 저는 종종 OOM(메모리 부족) 오류에 직면했습니다. 또한 제대로 된 업스케일링을 원하신다면, 최소 12GB VRAM을 갖춘 카드를 사용하는 것을 강력히 권장합니다.