360-degree panoramic shot - LTX-2
詳細
ファイルをダウンロード
モデル説明
LTX-2が4K動画を生成できることに気づいたとき、最初に思ったのは「やべえ、ついにVR動画を量産できるぞ」だった。だから、よく考えずにこのLoRAを作成して、LTX-2がデフォルトで既にこれができるかどうか試してみた。
短い答え： まあ、そんなところ。
Wan 2.2の_Hardcut_ LoRAと同様に、LTX-2は360°動画という「概念」は理解しているが、正しく実行するのは苦手だ。このLoRAは、もろもろの歪みを防ぎ、信頼性高く真の360度コンテンツを生成するために必要な追加の推進力を与える。
ただし、何らかの理由で、シームが滑らかに閉じられない。つまり、360度球体を回転させると、目立つ垂直線が残る。この問題を解決するノードが存在するかどうかは不明だが、もし解決策を見つけたら教えてほしい。
注：動画の終端は一致している。ただ、切り取られる点がわずかに異なるため、技術的には動画を水平方向にトリミングして、一方の端がもう一方の開始点と完全に一致するようにできる。
推奨設定
重み： 0.6–1 がうまくいく
- 0.2でも動作したので、自由に実験してみてください
アスペクト比： 2:1
後処理（オプション）
生の動画は、ほとんどの360度メディアプレイヤーやVRプレイヤーでそのまま再生できます。しかし、VRで本格的な奥行きを実現したい場合、動画にステレオスコピック深度を適用する必要があります。
このノードで可能です：
https://github.com/SamSeenX/ComfyUI_SSStereoscope?tab=readme-ov-file
⚠️ 警告： サイズ制限があるようです。
たとえば、私の動画の1つは約500MBになり、このノード（さらにはComfyUI自体）がアップロードを許容する上限を超えました。
回避策を見つけたら教えてください。それ以外の場合は、外部の深度ツールを使用するか、手動で深度を処理する必要があります。
VRメタデータの挿入（強く推奨）
ヘッドセットやプレイヤーが動画をVRコンテンツとして自動認識できるよう、VRメタデータを挿入することもおすすめです。
これにはGoogleのSpatial Mediaツールが使えます：
https://github.com/google/spatial-media/releases
無料で、非常に使いやすいです。
TL;DR
はい、動作します
2:1アスペクト比を使用してください
VR動画を作成できます
深度とVRメタデータを追加すれば、さらに品質を向上させられます
補足エピソード
正直、LTX-2が最初からこれができないのはむしろ良かったと思っています。なぜなら、このLoRAのトレーニングをすでに1日終えてしまったあとで、まずそれを確認すべきだったと気づいたからです。
さらに重要なのは、こうしたLoRAがこれほど少ない理由を、今なら完全に理解できたことです。5090ですらVRAMが足りず、48GBのAdaカードを1枚使う必要がありました。それに加えて、使いやすい平面パノラマ360°動画のデータセットを見つけるのは地獄でした。そのため、大規模なデータセットを構築できませんでした。幸い、そんなものは必要ありませんでした。
でも正直に言うと、このトレーニングが2日間の後で失敗していたら、「もういいや」と諦めていたでしょう。
とにかく、いつも通り、私の活動を気に入ってくださって、サポートしたいという方は、コーヒー1杯でもどうぞ ☕