ResearchMan← Technology
StarLightGS
Tool条件付き (MIT)#Spatial/3D#CreatorTools

StarLightGS

CoSTAR National Lab/2026-11

Overview

Gaussian Splat(3Dスキャンの点群的な表現)をUnreal Engine 5のライトで照らし直せるようにする、オープンソースのUE5.7+プラグイン。

技術のポイント

これまでGaussian Splatは「撮影したときの光」が焼き付いたままで、あとからUEのライトを動かしても見た目が変わらないのが弱点でした。StarLightGSはスプラットをUEの描画情報(GBuffer)に書き込み、エンジン標準のライト、メッシュが落とす影、Lumenのグローバルイルミネーションを受けられるようにします。つまり実写スキャンした場所に、夕方・夜・ネオンといった別の照明を当てられます。広告やイベントの現場では、ロケ地やプロダクトをスキャンして仮想スタジオに置き、照明だけを差し替えて複数パターンの映像を作る、CGキャラクターを違和感なくスキャン背景に立たせる、といった使い方が想像できます。クリップ用のボックス・球ボリュームで不要部分を切り取って書き出す機能もあり、制作フローに組み込みやすい作りです。ベータ段階ですが、スキャン素材をゲームエンジンの映像表現に溶け込ませる道を開く実用的な一歩です。

技術の詳細

仕組み:Gaussian Splatは、小さな楕円形の光る粒を何百万個も並べて空間を表現する方式です。StarLightGSはこの粒をUEの描画パイプラインの中間バッファ(GBuffer)に「不透明な楕円体」として書き込みます。するとUEは粒を普通のメッシュと同じ物体とみなし、ポイントライト・スポットライト、仮想シャドウマップによる影、Lumenの間接光、画面空間の反射を適用できます。ただし粒がLumenに光を返すわけではないため、スキャン物から周囲の物体へ間接光は落ちません。レイトレーシングも非対応です。 従来との違い:従来のUE向けスプラットプラグインは「見た目をそのまま表示する」ものが主で、ライティングは焼き込み済みでした。本ツールは粒ごとの法線(向き)と材質(金属度・粗さ)を持つPLYを読み込み、再照明そのものを可能にします。そのための学習側パイプラインも別リポジトリで公開されています。 使うには:UE 5.7以上とVisual Studio 2022以上が必要で、プラグインをプロジェクトのPluginsフォルダに置き、プロジェクトファイルを再生成してビルドします。既定の上限は500万スプラットで、コンソール変数r.Gaussians.MaxSplatsで拡張可能です。再照明用PLYの作成にはNVIDIA RTX 20〜50番台以上のGPU、Linux/WSL2、Dockerが必要で、学習ツールは非商用ライセンスなので商用案件では注意してください。費用はかかりません。

License

UEプラグイン本体はMIT。ただし学習パイプライン(starlightgs-training)はInriaラスタライザ同梱のため非商用、サンプルアセットはCC BY-NC-SA 4.0。商用で使うなら自前のrelightable splatの用意が必要。

Sources

Related Works

  • XV3DGS-UEPlugin

    UEでGaussian Splatを表示するプラグイン。ライティングは焼き込み済み。

  • 3D Gaussian Splatting (Inria)

    Gaussian Splatの原典となる公式実装。

  • gsplat

    Nerfstudioによるスプラット学習・描画ライブラリ。