EZ Video Utilities

详情

下载文件

模型描述

包含两个专为视频设计的独立实用工作流,旨在简洁紧凑。


EZ 视频合并器:一个通过提取帧并合并来组合两个视频文件的工作流。主要用于合并通过前一个视频的最后一帧扩展生成的视频,但也可用于合并 GIF 等内容,并支持将输出保存为多种格式。

若用于通过最后一帧技术扩展的视频,为避免重复使用用于生成第二个视频的最后一帧,请在第二个视频输入中将“跳过前几帧”设置为“1”,以移除视频开头的重复帧,确保最终合并视频的过渡平滑。


EZ 视频超分与插帧:一个对输入视频进行插帧和超分的工作流。默认设置假设一个 16fps 的视频经 2 倍插帧、4 倍超分后再降采样至 2 倍。您可以使用任何超分模型,但我推荐 MNKD 的 Siax 模型。请根据插帧倍数调整输出帧率,例如,16fps 输入视频经 2 倍插帧后,输出帧率应设为 32fps。

为何先插帧再超分?直觉上似乎应先超分再插帧,这样插帧效果更平滑,尤其因为插帧比超分快得多,且超分前插帧可减少需超分的帧数。但这样做的原因有几点:首先,内存占用。插帧处理更大图像时会消耗更多内存。其次,超分会添加细节,而这些细节可能被插帧模型误判,导致问题。超分模型本身在帧与帧之间存在固有不准确性,这会干扰插帧模型对中间帧的判断。因此,为获得最纯净的插帧保真度,使用原始视频帧是最佳实践。

至于超分,为何要降采样?因为超分模型并不完美,它们可能生成在 1:1 观看尺寸下可见的不准确细节和图案。通过降采样,我们可以减少或消除这些伪影,同时获得更清晰干净的图像,并减小文件体积。即使一个 4 倍超分后降回 1 倍的视频,其效果仍明显优于原视频。

至于其他设置,插帧设置中的“ds_factor”可根据视频分辨率调整。简单来说,分辨率越高,该值应越低。例如,2K 或 4K 视频可使用 0.5 或 0.25 的 ds_factor。从技术上讲,此设置会降低插帧的采样密度,以限制其对细节的过度依赖。若插帧过于锐利,可能导致帧间不该移动的微小细节发生抖动,或浪费过多时间插值本无需插值的细节。

自 v2.0 起,您可以独立选择执行超分或插帧。随后可手动加载输出视频进行进一步超分或插帧,这总体上降低了内存使用量,并允许您按不同于默认工作流的顺序执行不同操作。

此模型生成的图像

未找到图像。