Improved Wav2Lip Workflow

v4.2: 自分でRembツールを作成し、クォージ・ビデオエディターのようにしました。背景の入れ替え機能を追加しました。https://github.com/GeekyGhost/ComfyUI-GeekyRemB.git

v2.0: より通常のビデオメーカーのデイジー・チェーンです。Cascade、SVD、AnimateDiffにWav2LipとIF Whisperを組み合わせて、話すアバターを作成しています。お好みのビデオ作成方法を使用できます。これは私の特定の設定用にややクリーンなビデオを提供します。高度な設定であり、モデルを自分で探す必要があります。ComfyUI専用のcascadeモデルを使用しています。SVD用にAnimateLCMのバージョンを使用しています。LCM animateDiffモデルとLCM SD 1.5モデルを使用しています。Wav2Lipにはいくつかのモデルが存在します。Reactorは一部のユーザーにとってインストールが難しい場合があります。IF Whisperは他のユーザーでエラーが出ているようです（ComfyUIおよび他のノードの最近の更新に関連している可能性があり、最新バージョンに両方を更新する必要があるかもしれません）。

v1.0: ComfyUIのwav2lip拡張機能にいくつかの更新を加え、テストを実施しました。これは単なるフォークであり、メンテナーとは関係ありません。公式のComfyUI拡張機能を使用することもできます。私のバージョンは、リップシンクの強度スライダーを追加しただけです。2.0はより目立つリップシンクを提供し、1.0がデフォルト、0にするとリップシンクが無効になります。他のツールと組み合わせ、動画を追加してアニメーションアバター動画を作成しています。

モデル情報については、私のフォークリポジトリまたはメインリポジトリをご覧ください。違いは追加した強度スケールのみです。1.5が非常に適しています。また、スムージングスライダーも追加しました。私のリポジトリの他のすべての内容は、これらの2つの追加以外は同じ手順です。wav2lip.py と wav2lip_node.py

ComfyUI wav2lipのオリジナルリポジトリ - https://github.com/ShmuelRonen/ComfyUI_wav2lip.git