LTXV Photo Animator

详情

下载文件

模型描述

该动画师基于Lightricks GitHub页面的帧插值工作流。

此ComfyUI工作流允许您选取若干张主题照片,并在照片之间进行插值,从而生成动画。

安装方法:

非GGUF版本:

请阅读Civitai的LTX 0.9.5页面上的说明,然后从该页面下载照片动画器,并在ComfyUI中打开LTXV095_photo_animator.json

GGUF版本:

City96的HuggingFace页面下载您选择的GGUF模型。Q8版本在加载所有模型时,刚好可在10GB显卡上运行,在12GB显卡上会更轻松。较小尺寸的文件能更好适配,但可能在动画中出现伪影或错误。

然后从City96的HuggingFace页面下载VAE。

再从City96的HuggingFace页面下载您选择的T5文本编码器。较小的模型应可正常工作,因为本工作流中CFG已设为1。

完成后,在ComfyUI中打开LTXV095_photo_animator_gguf-edition.json

使用说明:

使用该工作流时,请按顺序在底部添加照片。接着考虑动画的帧率。LTX默认为25fps,但本工作流设为60fps以获得更流畅的动画,但处理时间更长。请根据需求调整帧率,并同时修改视频输出帧率。

然后思考每两张照片之间需要多少帧,帧数应为8的倍数(依据LTX的工作原理)。若使用25fps且希望第一张与第二张照片之间约1秒间隔,则对照片1使用帧索引0,对照片2使用帧索引24;若使用60fps,则使用帧索引0和帧索引56或64。

左下角的总帧数应为最后一个帧索引+1。例如,若最后一个帧索引是200,则总帧数应设为201。

注意事项:

六个照片节点组中有两个默认被跳过。您可以按住Ctrl键并用鼠标拖选来启用它们,同样的方式也可用于跳过其他照片节点组。

尽量只聚焦于一个移动的主体。若存在多个主体,建议将动画拆分为多个部分,再用视频编辑器合并,因为LTX可能对多主体产生混淆。笔的动画之所以使用两张照片同时输入,正是出于此原因。

请拍摄足够多的照片,并事先明确您想要的效果。宁可多拍,也不要少拍,因为若后期需要补拍,光照条件很可能已发生变化。

通常建议LTX使用长提示词,但本工作流中并非必需。笔的动画即未使用任何提示词。

每个视频均单独使用了MMAudio,因我的ComfyUI无法加载它。您可在Civitai上搜索合适的替代工作流。

在测试中,仅IPNDM采样器能稳定运行且不产生大量伪影。

由于硬件限制,我只能运行GGUF版本。常规版本应也可正常工作。LTX 0.9.6已发布,可能效果更好,但目前尚无GGUF版本。

祝您成功,创作愉快!

此模型生成的图像

未找到图像。