ResearchMan← Technology
CrossView-Warp
Tool条件付き (Apache-2.0)#GenVideo#CreatorTools#Spatial/3D

CrossView-Warp

Cseti(個人開発者)/2026-09

Overview

既に撮影した動画クリップを、実際には撮っていない別のカメラアングルから見た映像に描き直す技術。奥行き情報をもとに画面を立体的に組み替え、新しいカメラ位置から見た映像をAIに生成させる。

技術のポイント

この技術がすごいのは、『撮り直しなしでカメラアングルを変えられる』という点です。動画編集では通常、別の角度から見たカットが欲しくても、もう一度その場にカメラを立てて撮影し直すしかありません。CrossView-Warpは、すでにある1本の動画から『奥行き地図』(画面のどこが手前でどこが奥かを示す情報)をAIが自動で推定し、その情報を頼りに『もしカメラが右に90度回り込んだらどう見えるか』を計算して映像を作り出します。カメラの動きは角度や距離といった数値で細かく指定できるため、文章のプロンプトでは難しかった正確な画角コントロールが可能です。広告制作の現場では、1回のロケ撮影素材から複数アングルのバリエーションを後から作る、あるいは商品の周りを回り込むようなカットを実写撮影なしで追加する、といった使い方が考えられます。既存のドローン映像や店頭撮影素材を活かして『別アングル版』を量産できれば、追加ロケ費用を抑えながら表現の幅を広げられる可能性があります。

技術の詳細

仕組みを噛み砕くと3段階です。①MoGeという別のAIが、元動画の各フレームから『奥行き地図』(画面内の物体がカメラからどれくらい離れているか)を推定します。②その奥行き情報をもとに画面のピクセルを3D空間上に仮想的に配置し直し、指定したカメラ移動量(左右・上下・前後)に応じて再投影します。これで『新しい角度から見た大まかな映像』のたたき台ができますが、元のカメラが写していなかった部分(物陰など)は情報がなく、マゼンタ色の穴として残ります。③この穴だらけのたたき台と元動画を、MiniMax H3という動画生成AIに専用LoRA(狙った変化だけを追加学習させた軽量な補正データ)と一緒に読み込ませ、穴を自然に埋めながら被写体の見た目や動きの一貫性を保った最終映像を生成します。 従来のAI動画生成でカメラを動かす場合、多くは『カメラを右に回り込ませて』といった文章プロンプトでAI任せにするしかなく、狙った角度に正確に合わせるのは苦手でした。CrossView-Warpは角度を数値で指定でき、しかも元映像の被写体の見た目(服装や商品パッケージなど)をそのまま維持できる点が違います。似た狙いの技術に、カメラパスを描いて映像を新規生成する『Camera H3』がありますが、CrossView-Warpは『すでにある映像を別角度に描き直す』復元・改変寄りのアプローチである点が特徴です。 使うにはComfyUI(無料の画像・動画生成AIツール)、MiniMax H3という動画生成AIモデル(数十GBのダウンロードが必要)、深度推定用のMoGeモデル、そして専用LoRAファイルが必要です。ある程度のGPU性能(VRAM)を積んだPCが前提で、個人でも無料で試せますが、実務利用時はMiniMax H3側のライセンス条件(年商規模による商用可否、利用地域の制限など)を確認する必要があります。

License

ノード本体(コード)はApache-2.0で無料商用可。ただし土台となるMiniMax H3本体は別のコミュニティライセンスで、年商2000万ドル未満なら『MiniMax H3』の表記付きで無料商用可・それ以上は別途許諾が必要。加えてオープンウェイトの直接利用は米国・EU・英国・韓国では許諾対象外(ホスト版サービス経由なら可)。

Sources

Related Works