FAST MOCHI | Text to Video | Test bench
세부 정보
파일 다운로드
이 버전에 대해
모델 설명
MOCHI | 빠른 테스트 벤치
이 워크플로우는 Mochi에서 가능한 한 빠르게 비디오를 생성하는 데 초점을 맞춥니다.
저는 개발자, 프로그래머, 문제 해결 전문가, 또는 Python 전문가가 아닙니다. 단지 제가 발견한 결과를 꼭 공유해야 한다고 생각하여 여기에 무료로 공유하는 것입니다. 그래서 어떤 기능이 제대로 작동하지 않더라도 저에게 불평하지 마세요. 최선을 다해 도와드리지만, 99%의 경우 제가 Google을 이용하여 귀하의 문제를 해결할 것입니다. 여러분도 똑같이 할 수 있습니다.
V4:
새로운 노드로 워크플로우를 업데이트했습니다. V1-2-3은 더 이상 사용되지 않습니다. Civit가 불편하여 프리뷰가 오래된 버전 탭에만 남아 있기 때문에 이전 버전은 여기에 그대로 보관하겠습니다.
더 많은 세부 조정과 제어 기능 추가
V3:
최소 프레임을 7로 낮출 수 있다는 것을 발견한 후, 추가적인 제어를 도입했습니다. (이 경우 CFG를 낮추고 프롬프트 강도를 높여야 합니다)
이제 10초 이내에 매우 낮은 품질의 작은 미리보기 비디오를 생성할 수 있습니다! *
49프레임 이하 및 중간 설정에서는 VAE 타일링이 불필요함을 발견했습니다.
이로 인해 타일 중복 문제는 자동으로 해결됩니다.
제가 사용하는(3090) 환경에서 가장 빠르게 작동하는 조합을 발견했습니다:
bf16 + clip t5xxl_fp8_e4m3fn_scaled
이 모델에 대한 Driftjohnson의 연구 덕분입니다. 그를 확인해보세요
- 전반적인 워크플로우 정리
* 현재 UI에서는 7프레임과 13프레임까지, 그리고 20단계 이하로 스텝 값을 설정할 수 있습니다. 이 값들은 단지 빠른 프롬프트 테스트를 위한 목적으로 의도적으로 추가된 것이며, 이후 이 값을 높이면 최종 결과물이 어떻게 나올지 대략적인 감을 잡는 데 유용합니다.
따라서 이 값들을 사용하여 일관된 결과를 기대하시면 안 됩니다. 이는 단지 빠른 대략적인 미리보기일 뿐이며, 적절한 프롬프트를 찾고, 장면을 구성하며, 프롬프트 탐색을 빠르게 수행하는 데 여전히 유용합니다.
적절한 프롬프트를 찾은 후에는 스텝과 프레임을 모두 증가시켜야 합니다!
V2:
자동 프롬프트 생성을 위한 이미지 로드 기능 추가
더 빠른 테스트를 위한 개선된 설정
*동일한 시드로 작업하려면 Florence 시드도 잠그셔야 합니다. 제가 이를 추가하는 것을 잊어버렸네요😁 죄송합니다.
*몇 개의 노드에서 연결 해제 및 재연결 문제가 발생하여 다른 위치로 이동하는 버그가 있습니다. 이로 인해 너비와 높이 불일치가 발생할 수도 있습니다. 원인을 모르겠습니다. 알려주시면 감사하겠습니다.
________________________________________________________________________________________________
이것은 무엇인가요?
빠른 전환을 위한 편리한 UI로 정리된 다양한 설정 테스트 결과입니다.
여러 슬라이더를 통해 제가 유용하다고 판단한 저해상도/고해상도 설정을 쉽게 전환할 수 있습니다.
최소한의 품질로도 3090 GPU에서 1분 30초 내에 짧은 비디오를 생성할 수 있어, 테스트 및 프롬프트 탐색에 적합합니다.
물론 스텝, 프레임, 크기 등 모든 설정을 자유롭게 변경하셔도 됩니다.
이 설정들은 단지 제 기준에서 속도와 호환성에 가장 잘 작동한다고 판단된 값들입니다.
이 모델은 여전히 비교적 새롭습니다.
노란색으로 표시된 'Low Res' 바의 값들은 빠른 테스트 및 프롬프트 탐색을 위한 추천 설정입니다. 이 값들은 가능한 한 최저 품질로 빠르게 비디오를 생성하는 데 최적화되어 있습니다. 이 값들보다 더 낮게 설정하면 MOCHI는 실질적으로 사용할 수 없게 됩니다. 이 모델의 가능성을 빠르게 탐색하는 것이 필수적이라고 생각합니다. 위의 슬라이더를 '노란색 Low Resolution' 옵션으로 설정하면 최종 결과물의 대략적인 느낌을 얻을 수 있습니다. 그 후 해상도를 높은 값으로 증가시키면 됩니다. 이 방식이 필요하다고 판단하는 이유는 모델이 무겁고 매우 느리기 때문입니다. 낮은 설정에서 모델의 능력을 테스트하는 것은 매우 유용합니다.
설치 방법은 이 가이드를 따랐습니다.
이 워크플로우는 다음의 수정 버전입니다:/model/886896