ResearchMan← Technology
FreeGaussian
Tool条件付き#Spatial/3D#CreatorTools

FreeGaussian

OVER the Reality/2026-10

Overview

Insta360の生データ(.insv)から、ブラウザだけでGaussian Splat(写真のようにリアルな3D空間)を作るクラウドツール。床が水平で実寸の空間になり、ロボット用シミュレータに使えるメッシュ(GLB/USDZ)も一緒に出力される。

技術のポイント

360°カメラで部屋をぐるっと歩いて撮るだけで、見回せる写真級の3D空間が手に入ります。これまでの360°動画からの3D化は、2つのレンズの映像をつなぎ合わせた(スティッチ済みの)パノラマ動画を使うため、つなぎ目のズレが3D化の精度を下げていました。FreeGaussianは、つなぎ合わせる前の魚眼レンズ2枚分の生データを直接使い、カメラ内蔵のジャイロ(傾きセンサー)も参照して、傾きの補正と実寸スケールの推定まで自動で行います。広告・体験づくりでは、店舗やイベント会場、ロケ地をスマホ感覚でスキャンして、Web上で歩き回れる商品紹介やバーチャル内覧に使えます。出力にはテクスチャ付きメッシュ(GLB/USDZ)も含まれるため、UnityやiOSのARでの配置確認にそのまま持ち込めます。さらに床面が連続した平面として出るので、物理シミュレーション用の空間としても使えそうです。

技術の詳細

仕組み:Insta360の.insvファイルには、2つの魚眼レンズが撮った元の映像が入っています。通常はこれを1枚のパノラマにつなぎ合わせて(スティッチ)から3D化しますが、つなぎ目のゆがみが誤差の原因になります。FreeGaussianはスティッチ前の魚眼映像を直接3D化に使い、ジャイロと加速度センサーの記録で『上下の向き』を決めるので、床が水平で壁が垂直な状態で出力されます。長い通路や複数の部屋を歩いたときのズレ(ドリフト)を減らすため、同じ場所に戻ってきたかの照合(ループクローズ)も厳しくしたとされています。 従来との違い:従来の360°動画ワークフローは、傾きの手直しや大きさの指定を手作業で行うことが多く、出力もスプラット(点群のような粒の集まり)だけでした。この更新では、実寸スケール、水平補正、メッシュ(GLB/USDZ)出力まで一括で自動化されています。なお、通常のequirectangular(パノラマ形式の)mp4にも対応しますが、その場合は水平補正と自動スケールは付きません。速度向上の数値や、処理時間は公開されておらず未確認です。 使うには:ブラウザでfreegaussian.aiにサインインし、動画をアップロードするだけで、インストールや高価なGPUは不要です。無料プランがあり、.insv対応とメッシュ出力も無料プランで使えると案内されています(無料枠の上限や有料料金は未確認)。対応カメラは.insvを記録するInsta360(記事ではX5が例)で、他社の360°カメラはmp4経由になります。ソースコードは公開されていない商用クラウドサービスなので、商用案件で使う場合は利用規約の確認が必要です。

License

クラウドのWebサービス。無料プランあり(クレジットカード不要)。無料枠の上限、有料プランの料金、出力物の利用条件は公開ページに記載がなく未確認。商用利用の前に利用規約を確認すること。

Sources

Related Works

  • nerfstudio

    NeRFやGaussian Splattingを学習・可視化できるオープンソースの定番フレームワーク

  • gsplat

    Gaussian Splattingの学習・開発用オープンソースライブラリ(Apache-2.0)