ResearchMan← Technology
MotionBridge
Tool商用OK (MIT)#Motion/Body#CreatorTools

MotionBridge

adonisglobal(個人開発)/2026-10

Overview

手持ちの動画1本から人の動きを読み取り、3Dキャラ(Blender用)や2D切り抜きキャラの動きデータに変換できる、ブラウザ上で動くオープンソースのモーションキャプチャツール。

技術のポイント

高価なモーションキャプチャ用スーツや専用カメラがなくても、スマホで撮った動画だけで「人の動き」を3Dキャラに写し取れる点がすごいところです。PCのブラウザで動画を読み込むと、画面の中で動画とキャラの動きが並んで再生され、ずれを見ながら確認できます。出力はBlenderでそのまま使えるGLB形式やBVH形式(骨格の動きを記録する標準的なファイル)で、2D用にはPNGの切り抜きキャラ向けの動きデータ(JSON)も書き出せます。広告・体験づくりでは、ダンスや決めポーズを演者に動画で演じてもらいそのまま自社キャラクターに踊らせる、SNS用ショート動画のキャラ演技を撮影当日にラフ確認する、といった使い方が考えられます。制作前の企画段階で動きのイメージを素早く共有するプロトタイプ用途に向いています。なお作者自身が「実験的な土台」と位置づけており、動きの補正や対応モデルは発展途上です。

技術の詳細

仕組みは、動画の各コマからGoogleのMediaPipe(人の関節位置を推定する無料のAIモデル)で体の関節の位置を読み取り、それを取り込んだキャラクターの骨(ボーン)に割り当てて動かす、というものです。人の関節の並びとキャラの骨の並びは作りによって違うため、ボーンの対応づけは自動でも手動でも調整できます。これは「人の動きを、体型の違う別の人形に着せ替える」作業にたとえられます。処理はTypeScript・React・Three.jsで書かれ、ブラウザ内で完結します。 従来の本格的なモーションキャプチャは専用機材とスタジオが前提でしたが、これは普通の動画だけで始められるのが違いです。また、Blender向けの3Dと、PNGの切り抜きによる2Dの2系統を別々の作業場として用意している点も特徴です。ただし、リポジトリはコミット4件・v0.3.0の初期段階で、動きのブレ除去(クリーンアップ)、リターゲットの精度、対応モデルの幅、使いやすさはこれからです。OpenToonz向けの書き出しも未実装です。本番品質というより、ラフ確認や自作パイプラインの出発点として見るのが適切です。 使うにはNode.js 24とnpm、ハードウェアアクセラレーション有効なデスクトップ版Chromium系ブラウザが必要です。git cloneのあと「npm ci」「npm run setup:assets」「npm run dev」を実行し、ブラウザで http://127.0.0.1:5173/ を開きます。費用は無料(MIT)で、Blenderは書き出したファイルの確認・利用時のみ必要です。

License

本体はMIT。MediaPipe等の外部ランタイム・モデルは各自の規約に従う(リポジトリ内 THIRD_PARTY_NOTICES.md に記載)。

Sources

Related Works

  • Motion2MixamoRig

    動画の人物の動きをMixamoリグのキャラに写し、Blender/Unity向けGLBにする無料OSS。

  • GMR: General Motion Retargeting

    人の動きをさまざまなヒューマノイドロボットへ、CPUでリアルタイムに変換するリターゲットツール。

  • MAMMA

    複数カメラ映像から接触の多い2人の動きをSMPL-Xで取得するCVPR 2026 Oralの手法。非商用研究向け。