ResearchMan← Technology
Telekinetic Drive
Prototype研究用途のみ#HCI/MediaArt#Motion/Body#AI/Agents

Telekinetic Drive

東京大学 先端科学技術研究センター 稲見昌彦研究室(Information Somatics Lab)/2026-07

Overview

顔に現れるごくわずかな無意識の動きをカメラで読み取り、装着物なしでロボットを「念力」のように操作できるインターフェース。東京大学発、SIGGRAPH 2026・Augmented Humans 2026で発表。

技術のポイント

私たちは何かを「動かしたい」と思っただけで、実は顔や体にごくわずかな動き(数ミリ以下)が無意識に出ていることがある。Telekinetic Driveは、この本人も気づかないほどの微動をカメラで捉え、機械学習で「どちらに動かしたいか」という意図に変換して、ロボットアームを操作する技術だ。脳波計や視線計測、筋電センサーといった特別な装置を身につける必要はなく、普通のカメラの前に座るだけでよい。体験した人には、まるで念力でものを動かしているかのような感覚が生まれるという。広告・体験づくりの観点では、来場者が「考えるだけ」でオブジェが動く体験型ブースや、身体に装着物をつけられない人でも操作できる展示什器、SF的な「超能力」演出をリアルに実現するインスタレーションなどへの応用が考えられる。

技術の詳細

Telekinetic Driveは、ユーザーが「ロボットをこちらに動かしたい」と考えたときに無意識に生じる顔の筋肉のわずかな動き(マイクロモーション)を、通常のカメラ映像から検出する。あらかじめ集めた「意図した方向」と「そのときの微動パターン」のペアを機械学習(線形回帰モデル)に学習させることで、新しい微動パターンからユーザーが望む移動方向を推定し、ロボットアームの動きに変換する。 これまでのハンズフリー操作の研究の多くは、脳波(BCI)や視線トラッキング、筋電位センサーなど、専用の装置を体に装着する必要があった。Telekinetic Driveはカメラ映像だけで完結するため装着の手間や違和感がなく、「操作しているという自覚すらない」状態で機器を動かせる点が新しい。開発チームは2025年に日本語論文「念力UI」としてWISSで発表した研究を発展させ、2026年7月のSIGGRAPH(ロサンゼルス)とAugmented Humans 2026で「Telekinetic Drive」「Telekinetic UI」として国際発表した。 現状は研究プロトタイプで、ソースコードや製品としての配布はされていない。再現するには顔の特徴点を検出できるカメラと画像解析・機械学習の環境、そして被験者ごとに意図と微動パターンを対応づける学習(キャリブレーション)が必要になる。広告・展示用途で使うには、研究チームとの共同開発や技術協力の相談が現実的な入口になりそうだ。

License

学術研究プロトタイプ。ソースコードや製品としての配布はされていない

Sources

Related Works