Carlos Barreto (CEB Studios)/2026-06
MetaのSAM 3D BodyをBlenderから直接使えるようにした個人開発アドオンのv4。動画フッテージから3D人体ポーズを推定し、Blender上のアニメーションデータ(モーキャプ)として読み込める。
MetaがつくったAI『SAM 3D Body』は、1枚の写真から人物の全身の立体形状とポーズを起こせる最新モデルです。このCEBアドオンがすごいのは、それを研究者向けコードのままにせず、Blender(無料で定番の3D制作ソフト)のボタン操作でそのまま使えるようにしたこと。普通の動画を放り込むだけで、俳優も専用スーツもモーキャプ用スタジオもいらずに、キャラクターを動かすためのアニメーションデータ(モーションキャプチャ)が作れます。今回のv4では、処理の重さや使う環境に応じて複数のモデルを切り替えられる新ツールが加わりました。広告や体験づくりでは、TikTokのダンスや店頭でお客さんが撮った動きをそのままキャラクターに移し替えるCGM(ユーザー参加型)施策や、低予算でのキャラクターMV・バーチャルタレント制作のパイプラインに組み込めます。
土台となるMetaの『SAM 3D Body』は、1枚の画像から全身の3Dメッシュ(立体の人型)を推定するモデルです。このアドオンは、動画を1コマずつこのモデルにかけて各フレームの姿勢を推定し、それをBlender上の骨(ボーン)アニメーションとしてつなげることで、動画の中の人の動きを3Dキャラクターの動きに変換します。つまり“画像1枚のポーズ推定”を動画に連続適用して、モーションキャプチャに仕立てているわけです。 従来のモーションキャプチャは、反射マーカー付きスーツと複数の赤外線カメラを備えた専用スタジオが必要で、コストも準備も大がかりでした。近年はAIで動画から動きを推定する手法が増えましたが、多くは研究者向けのコードで、3D制作の現場にそのまま持ち込むにはエンジニアの手が要りました。このアドオンは、最新のSAM 3D BodyをBlenderのUIに橋渡しし、非エンジニアでも“動画→3Dアニメ”を試せるようにした点が実用上の違いです。 アドオン本体は作者Carlos Barreto氏(CEB Studios)のPatreon経由で配布される有料ツールです。土台のMeta SAM 3D Body自体は独自の『SAMライセンス』で、公開チェックポイントにはDINOv3-H+(8.4億パラメータ)やViT-H(6.3億パラメータ)などがあります。動かすにはBlenderと、モデル推論に耐えるGPU環境が必要です。商用で使う場合は、アドオンの規約に加え、基盤モデルのSAMライセンスの条件も確認する必要があります。
アドオン本体はPatreon経由で配布される独自ツール。基盤のMeta SAM 3D Bodyは独自SAMライセンス
本アドオンの基盤となるMetaの単眼3D人体・ポーズ推定基盤モデル
同作者による4D-Humansベースの先行Blenderモーキャプアドオン