07LEE(個人開発者)/2026-09
学習済みの3D Gaussian Splattingシーンから、狙った物体だけをクリックで選んで単独の3Dデータ(PLYファイル)として切り出せる無料オープンソースツール。
3D Gaussian Splatting(通称3DGS)は、多数の写真から空間をまるごと立体的に再現する近年人気の3D撮影技術ですが、撮れるのは『部屋ごと』『建物ごと』の一体化されたデータで、その中の椅子や置物だけを取り出して別の場面で使い回すのは困難でした。gs-object-extractionは、3DGSシーンをビューアで開いて対象物を数回クリックするだけで、Meta社の物体認識AI『SAM2』が自動でその物体を構成する点群を判別し、単独のPLYファイルとして書き出せるツールです。撮り直しや再学習は不要です。広告制作では、ロケ撮影した3DGSシーンから商品や小道具だけを抜き出し、別の背景と合成したり複数カットで使い回したりする用途に使えそうです。
仕組みとしては、3DGSシーンは無数の半透明な『点(ガウシアン)』の集まりとして物体や空間を表現しています。このツールはまず3D空間を通常のカメラのように様々な角度から2D画像としてレンダリングし、その2D画像上でユーザーがクリックした点をもとにSAM2が『物体の輪郭マスク』を作ります。16視点以上から同じ物体にマスクを重ねることで、どのガウシアン点がその物体に属するかを立体的に絞り込み、対象物だけを抜き出したPLYファイルを書き出します。 従来、3DGSシーンから特定の物体だけを分離するには、物体単体を撮り直して再学習するか、専門知識を要する手作業でのフィルタリングが必要でした。本ツールはSAM2による自動セグメンテーションとGPU上での高速処理(gsplat採用)を組み合わせ、GUI操作だけで完結させている点が特徴です。 利用にはNVIDIA製GPU、Python 3.10〜3.12、CUDA Toolkit、PyTorchが必要で、SAM2のチェックポイント(約1GB)を追加でダウンロードします。ソースコードはGitHubで無料公開されておりApache-2.0ライセンスのため商用利用も可能ですが、開発者1名・スター数1の初期段階プロジェクトのため、実運用に組み込む前の自己検証を推奨します。
本体はApache-2.0で商用利用可。依存するSAM2・gsplat等サードパーティ部分は各々のライセンスに従う必要あり。
3D Gaussian Splattingの原論文の公式実装。本ツールが前提とする学習済みシーンの生成元。
本ツールが物体マスク抽出に利用しているSegment Anythingシリーズの公式実装。