ResearchMan← Technology
CYANPUPPETS 1B-parameter AI Motion Capture
Tool条件付き#Motion/Body#CreatorTools

CYANPUPPETS 1B-parameter AI Motion Capture

CyanPuppets/2026-06

Overview

10億パラメータのAIモデルをローカル実行し、1080pウェブカメラ2台または動画アップロードから全身33点+顔140点+指を含む208キーポイントをリアルタイム抽出するマーカーレスモーションキャプチャ。UE/Unity/MetaHuman等に対応。

技術のポイント

これまで全身のモーションキャプチャといえば、反射マーカー付きの専用スーツや何台ものカメラが必要でした。CyanPuppetsは、10億パラメータのAIモデルを手元のPCで動かし、1080pのウェブカメラ2台(または動画のアップロード)だけで全身の動きをリアルタイムに捕まえます。拾えるのは体33点+顔140点+指(片手21点)など計208点で、遅延は0.1秒以下。しかもゲーミングPC級のGPU(VRAM 8GB)で動きます。取り込んだ動きはFBX書き出しやMetaHuman・VRMなどへの流用もでき、UE・Unity・MetaHumanに対応。広告や体験づくりでは、イベント来場者の動きをその場でブランドキャラクターに“憑依”させるライブ演出、店頭サイネージでの『あなたがアバターになる』体験、低コストなVTuber型キャンペーンなどが、カメラ2台で組めます。

技術の詳細

カメラに映った人の映像を、AIモデルが1コマごとに解析し、体・顔・指の合わせて208カ所の“キーポイント(関節や特徴点)”の位置をリアルタイムに割り出します。マーカー(体に貼る目印)を一切使わない“マーカーレス”方式ですが、各カメラの個別キャリブレーションは必要で、着替えは不要でもキャリブレーションは省略できません。処理は0.1秒以下の遅延、30〜50FPSで動作し、手足の位置誤差は平均3cm未満と報告されています。 本格的なモーキャプは、マーカースーツ・赤外線カメラ・専用スタジオという“三点セット”が前提で、導入に数百万円規模かかることも珍しくありませんでした。CyanPuppetsは、その一式をAIとウェブカメラ2台に置き換え、しかも指や表情まで同時に取れるのが差です。処理をクラウドではなくローカル(手元のPC)で回すため、映像を外に出さずに済み、遅延も小さく抑えられます。 無料のUE/Unity向けプラグインが公開されており、1080pウェブカメラ2台+VRAM 8GBのGPUを積んだPCがあればリアルタイム取り込みが可能です。より高精度・業務用途には有償ラインがあり、ウェブカメラ版が月額$50(年額$599)、デュアル4Kカメラ同梱のエンタープライズ版が$1,499などがあります。クローズドソースの商用製品のため、キャンペーンで使う際は利用規約とライセンス範囲の確認が必要です。

License

クローズドソースの商用製品。UE/Blender向けプラグインに無料版あり(VRAM 8GB必要)。Webカメラ版$50/月、エンタープライズ版$1,499などの有償ラインも併存

Sources

Related Works

  • Move AI

    マーカーレスモーキャプの代表的商用サービス

  • DeepMotion Animate 3D

    動画アップロード型のAIモーションキャプチャSaaSの先行例