LTXV Photo Animator

애니메이터는 Lightricks GitHub 페이지의 프레임 보간 워크플로우를 기반으로 합니다.

이 ComfyUI 워크플로우를 사용하면 대상의 여러 사진을 가져와 사진 사이의 모든 내용을 보간하여 애니메이션을 생성할 수 있습니다.

설치 방법:

Non-GGUF 버전:

Civitai의 LTX 0.9.5 페이지의 지침을 읽고, 이 페이지에서 사진 애니메이터를 다운로드한 후 ComfyUI에서 LTXV095_photo_animator.json을 열으세요.

GGUF 버전:

City96의 Huggingface에서 GGUF 파일을 선택하여 다운로드하세요. Q8은 모든 모델을 로드한 상태에서 10GB 그래픽 카드에 거의 맞으며, 12GB에서는 더 여유롭게 작동합니다. 더 작은 크기의 파일은 애니메이션에서 아티팩트나 오류가 발생할 수 있는 대가로 더 잘 작동합니다.

그런 다음 City96의 Huggingface에서 VAE를 다운로드하세요.

또한 City96의 Huggingface에서 원하는 T5 텍스트 인코더를 다운로드하세요. 더 작은 모델은 이 워크플로우에서 CFG가 1로 설정되어 있기 때문에 작동합니다.

이 작업을 마친 후 ComfyUI에서 LTXV095_photo_animator_gguf-edition.json을 열으세요.

지침:

워크플로우를 사용하여 사진을 아래쪽에 순차적으로 추가하세요. 그런 다음 애니메이션의 프레임 속도를 결정해야 합니다. LTX 기본값은 25fps이지만, 이 워크플로우에서는 더 부드러운 애니메이션을 위해 60fps로 설정되어 있으며, 실행 시간이 더 오래 걸립니다. 필요에 따라 변경하세요. 동시에 비디오 출력 프레임 속도도 변경해야 합니다.

그런 다음 각 사진 사이에 원하는 프레임 수를 고려하세요(8의 배수, LTX 작동 방식 기준). 25fps이고 첫 번째와 두 번째 사진 사이에 약 1초를 원한다면, 사진 1에는 프레임 idx 0을, 사진 2에는 프레임 idx 24를 사용하세요. 60fps의 경우 프레임 idx 0과 프레임 idx 56 또는 64를 사용하세요.

아래 왼쪽의 프레임 수는 마지막 프레임 idx + 1이어야 합니다. 예를 들어 200이라면 프레임 수를 201로 설정하세요.

참고 사항:

여섯 개의 사진 노드 그룹 중 두 개는 기본적으로 우회됩니다. 마우스로 Ctrl + 드래그하여 선택하면 이 노드 그룹을 활성화할 수 있고, 같은 방법으로 다른 사진 노드 그룹을 우회할 수 있습니다.

한 개의 주체만 움직이도록 집중하세요. 두 개 이상이 있다면, LTX가 혼동할 수 있으므로 애니메이션을 여러 부분으로 나누어 비디오 편집기에서 합치는 것이 좋습니다. 펜 애니메이션은 이 이유로 매번 두 장의 사진을 동시에 사용합니다.

충분한 수의 사진을 찍고, 사전에 원하는 결과를 고려하세요. 필요할 때 조명이 변할 수 있으므로, 너무 적은 사진보다는 너무 많은 사진이 낫습니다.

LTX에서는 일반적으로 긴 프롬프트를 권장하지만, 필수는 아닐 수 있습니다. 펜 애니메이션은 프롬프트를 사용하지 않습니다.

MMAudio는 각 비디오에 별도로 사용되었으며, 제 ComfyUI는 이를 로드할 수 없기 때문입니다. 적절한 워크플로우를 Civitai에서 검색하세요.

IPNDM은 테스트에서 큰 아티팩트를 발생시키지 않고 작동하는 유일한 샘플러입니다.

제 시스템의 하드웨어 제한으로 인해 GGUF 버전만 실행할 수 있습니다. 일반 버전도 작동해야 합니다. 최근 LTX 0.9.6이 출시되었으며, 더 나은 성능을 발휘할 수 있지만 현재 GGUF 버전은 제공되지 않습니다.

행운을 빕니다! 즐거운 애니메이션 제작 되세요!