JBOOGX & THE MACHINE LEARNER'S ANIMATELCM SUBJECT & BACKGROUND ISOLATION via INVERTMASK VID2VID + HIGHRESFIX

详情

模型描述

这是我对 AnimateLCM 工作流的优化版本,经过精简与整合,更便于使用。

该工作流最多仅需 12-14GB 显存,大大降低了对显卡配置的要求,更适合使用小型 GPU 的用户。

此工作流依赖并需要一个与视频输入匹配的 Alpha 通道遮罩才能正常运行。它会读取该遮罩,调整其尺寸(感谢 @Kijai 帮助我解决初始的 CUDA 错误),并将其反转。

我建议配合此工作流使用 MACHINEDELUSIONPhotonLCM 模型

如何获取该 Alpha 遮罩完全由你决定。我个人偏好在 Adobe After Effects 中手动进行逐帧描摹以获得高精度效果。

前两张 IPAdapter 图像用于主体(即 Alpha 遮罩中的白色部分)。

后两张 IPAdapter 图像用于背景(遮罩会自动反转以实现此效果)。

在高分辨率修复(HighResFix)中使用双线性插值(Bilinear)可避免在较长帧视频中出现 CUDA 错误。设置为 1.5 倍缩放后,高分辨率修复完成后将输出清晰的 768x1344 分辨率画面。

感谢每一位用户和所有支持!

特别感谢 @cerspense @Purz @jeru @Fill @MidJourney.Man @PatchesFlows,感谢你们允许我不断倾诉关于 AnimateDiff 的想法与愿望,并在我屡屡碰壁时帮助我找到解决路径。

我在 Instagram 上的账号是 @jboogx.creative

此模型生成的图像

未找到图像。