Burgstall-labs/2026-10
Gaussian Splat(3Dスキャン)のシーン内でオブジェクトをクリックし、削除・差し替え・切り出しができるローカル実行のComfyUIノード群。
3Dスキャンしたシーンは、写り込んだ不要物を消したり、別の物に置き換えたりするのが難しい素材でした。SpEdEは、シーン上の物体をクリック(または名前指定)で選ぶと、削除(Remove)、差し替え(Replace)、切り出し(Extract)ができます。削除では、物体に属する点を消した後、隠れていた面を画像生成AIで描き足します。穴の部分にだけ新しい点を足すので、周囲は壊れません。広告制作では、ロケ地を3Dスキャンしたあとで看板や人物、小道具だけを消す、商品を別の物に差し替えた複数案を作る、背景から主役だけを切り出して別シーンに置く、といった使い方ができます。撮影し直さずに空間素材を調整できるのが強みです。すべて手元のGPU上で動き、クラウドに素材を送らずに済みます。
仕組み:クリック位置からSAM 3.1で物体の範囲を特定します。深度推定(MoGe-3)で形を把握し、削除する場合はその物体のGaussianを取り除きます。その後、Qwen-Image 2.1が見えなくなった面を描き足し、穴の部分にだけ新しいGaussianを生成します。各ステップに品質のゲート(合格基準)があり、基準を満たさなければ処理が止まります。差し替えでは、生成した画像をTripoSplatでGaussianに変換して配置します。 従来との違い:従来のGaussian Splat編集は、手作業で点を選んで消す作業が中心でした。消した後の穴埋めも別ツールが必要でした。SpEdEは、選択から穴埋めまでをComfyUIのワークフローとして一続きにしています。ワークフロー(API形式10本)とWeb UIも付属します。 使うには:ComfyUI 0.37以降のcustom_nodesにクローンし、ComfyUI自身のPython環境で依存をインストールします。gsplat 1.5以上を、お使いのtorchとCUDAに合わせてビルドする必要があり、ここでつまずきやすいです。NVIDIA GPUが必須です。動作確認は32GBのRTX 5090のみで、Windowsは未検証です。メインの経路だけでモデル重みが約27GB、RAMは約64GB推奨です。公開直後(3コミット)で、作者もVRAMの少ない環境は未検証としています。
コードはAGPL-3.0以降。使用するモデルは各自のライセンスに従う。例としてQwen-Image 2.1 Research Licenseは非商用で、編集後のシーンにも入力側の制約が引き継がれる。商用案件では使用モデルの確認が必須。