RotoMaker V3 - 업데이트

새로운 워크플로우를 추가했습니다. 전경 비디오 레이어와 배경 비디오 레이어를 추가하면, 전경 요소를 배경보다 낮은 반복 횟수로 루프할 수 있으며, 이는 영상에서 완전히 설명되어 있습니다 :D 이를 통해 완전히 애니메이션된 장면을 만들 수 있습니다. 전경 오프셋 옵션도 제공됩니다.

(참고: 이 기능은 연구/비상업용 라이선스를 가진 InsightFace 구현체를 기반으로 개발되었습니다. 이제 새로운 오픈소스 구현체가 등장했으며, 향후 버전에서는 이를 활용할 계획입니다.)

V2

RotoMaker-Studio

- RotoMaker의 모든 기능을 통합한 버전

- CNET과 함께하는 특별한 SDXL Trio txt2img 포함

- 프레임 동기화를 유지하려면 30 FPS를 유지하세요.

[선택 도구]

페이스 모델 생성

- 이미지를 추가하여 Stage 2에서 사용할 페이스 모델을 저장하세요

프레임 덤프

- Mimic Motion 드라이빙 비디오를 프레임 시퀀스로 추출하여 Trio CNET, Stage 0에서 사용하세요

비디오 합치기

- 분할된 비디오 클립을 순차적으로 추가하여 Stage 3용 하나의 비디오로 합치세요

[주요 워크플로우]

0: TRIO

- 특별한 SDXL CNET txt2img 워크플로우

- 드라이빙 비디오의 프레임 사용

- SDXL Hyper와 함께 스택된 LoRA 로더

- 흰색 배경을 사용한 Roto Matte로 Mimic Motion용 이미지 준비

1: 애니메이션

- 흰색 배경을 사용한 Mimic Motion으로 드라이빙 비디오로 이미지 애니메이션

- (PATH) 로더를 통해 대용량 비디오 사용 가능

- 드라이빙 비디오를 1:1, 1024x1024로 크롭하는 것을 권장

- 자동 로토스코프/마스크

- MP4, GIF 및 PNG 시퀀스로 출력

2: 마스킹된 얼굴 교체

- 선택한 클립(합쳐진 비디오) 로딩

- 로딩된 페이스 모델을 사용하여 얼굴 가림 마스킹으로 얼굴 교체

- 자동 로토스코프/마스크

- MP4, GIF 및 PNG 시퀀스로 출력

초기 릴리즈 영상:

RotoMaker는 이전에 출시한 Loki-LivePortrait, Loki-MimicMotion, Loki-FaceSwap 및 Roto Basic을 기반으로 한 맞춤형 워크플로우 집합입니다.

이것은 비디오에서 비디오로의 워크플로우를 단계별로 연결하는 방식을 제공합니다. 영상 설명이 제공됩니다.
워크플로우 사이에서 모델을 언로드하려면 관리자 메뉴를 사용하세요(메모리 절약 효과).

LivePortrait 및 Mimic Motion 설치에 대한 더 자세한 정보는 여기에서 확인하세요:
/model/539936/loki-live-portrait-fastest-face-swap-batch-modes

각 워크플로우에서 동일한 프로젝트 이름을 사용하세요

Stage 1: 비디오 드라이버와 임의의 이미지를 사용한 애니메이션
Stage 2: 페이스 모델을 사용한 얼굴 교체 비디오
Stage 3: LivePortrait(정지 영상만)
Stage 4: 주체를 GIF, MP4 및 PNG 시퀀스로 로토스코프

모든 파일은 자동으로 구조화됩니다.
예: 프로젝트 이름 = "rotoMaker-chain005"