ipiv's SDXL Lightning text2img2vid SD1.5 AnimateDiff LCM

이 워크플로우는 SDXL Lightning으로 생성된 이미지를 참조로 사용하여, SparseCtrl + IPAdapter를 통해 SD 1.5 AnimateDiff LCM 비디오 생성을 안내합니다.
AnimateLCM + SDXL Lightning을 결합함으로써 txt2img -> img2vid 애니메이션을 매우 빠르게 생성할 수 있습니다.

만족할 만한 미리보기를 찾을 때까지 업스케일링 프로세스를 비활성화하거나 우회하는 것을 권장합니다. 참조 이미지도 마찬가지입니다. (또는 SDXL 참조 그룹을 완전히 비활성화하고 자체 이미지를 로드할 수 있습니다.)
SparseCTRL 또는 IPAdapter 중 하나를 우회하여 실험할 수도 있습니다. (참조 이미지와 애니메이션에 따라 하나 또는 둘 모두가 더 나은 결과를 낼 수 있습니다.)

이 워크플로우에서 사용된 모델:

1. AnimateLCM LoRA 및 모션 모듈

2. Dreamshaper SDXL Lightning (또는 Lightning LoRA와 결합된 임의의 SDXL 체크포인트)

3. Photon (또는 임의의 SD1.5 체크포인트)

4. SparseCtrl rgb (Comfy Manager에서 사용 가능)

5. IP-Adapter (Comfy Manager에서 사용 가능)

6. IP-Adapter용 Clip vision (Comfy Manager에서 사용 가능 - CLIP-ViT-H-14-laion2B-s32B-b79K)