ResearchMan← Technology
CozyClay
Tool条件付き (AGPL-3.0-or-later)#CreatorTools#Motion/Body#AI/Agents

CozyClay

NomaDamas (Doyun)/2026-10

Overview

ブラウザだけで動くオープンソースのプリビズ(撮影前の仮映像)ツール。シーンを組み、キャラにポーズを付け、カメラのカットを切り、そのカットをAI動画モデルへ渡せる。

技術のポイント

3Dソフトを開かなくても、ブラウザの1タブで「灰色の箱とキャラ人形で作った仮の映像」を作り、その構図・カメラワークをそのままAI動画生成モデル(Seedance、Kling、Veoなど)の参考素材として渡せる点が新しい。AI動画は文章だけだと構図やカメラの動きが思い通りにならないが、ここで先にカットを決めておけば意図が伝わりやすい。広告では、15秒CMの絵コンテ代わりに仮映像を作ってクライアントと合意し、そのまま本番のAI生成へ進める流れが作れそう。ClaudeやChatGPTなどのAIに「このシーンを組んで」と頼む操作(チャット・MCP・ターミナルCLI)にも対応し、人が触る画面とAIが触る画面が同じ命令系統になった2.0が2026年10月1日に出た。

技術の詳細

仕組み: Three.jsという、ブラウザで3Dを表示する技術で作られたエディタです。画面上で箱や小道具を置き、キャラを配置し、ドリーレール(カメラを滑らせる線路)を引いてカメラの動きを設定できます。書き出しはMP4のほか、AI動画向けの連番画像パック、奥行き・法線(面の向き)の画像、絵コンテ、編集ソフト向けのカット表(OTIO)に対応します。モーションは、NVIDIAのKimodo(ポーズ列から動きを作るモデル)で生成でき、動画や写真から人の動きを取り出すモーキャプ機能(GVHMRベース)も備えます。 従来との違い: 従来のプリビズはBlenderやMayaなど重いソフトを覚える必要があり、AI動画の作成とも別工程でした。CozyClayは「仮映像を作る→AI動画へ渡す」を1つの道具にまとめています。v2.0.0(2026-10-01)では画面を刷新し、人もAIも同じコマンドで操作する設計(エージェント対応)になり、v1.9.0からはAIアシスタントのパネルが複数のモデル提供元(Anthropic、OpenAI、Gemini、OpenRouterなど)に対応しています。 使うには: Node.js 22.19以上とChromium系ブラウザがあれば、ターミナルで `npx cozyclay` と打つだけで起動します。ブラウザ上の体験版(cozyclay.org)で基本操作は試せますが、動画の書き出しなどはローカル起動が必要です。モーション生成にはKimodoを動かせるGPU(NVIDIA CUDA推奨、Apple Siliconでも可)が必要で、AI動画の生成自体は別サービスの費用が別途かかります。

License

無料のOSS。AGPLのため、改変版をネットワーク経由で提供する場合はソース公開が必要。自社内で使う分には制約は小さい。モーション生成(Kimodo)とビデオモックアップはGPUマシンが必要。

Sources

Related Works

  • Kimodo (NVIDIA)

    CozyClayのモーション生成に使われている、制御可能な人体モーション生成モデルのコードとデモ。

  • VIREA

    テキストと会話からVRMキャラの連続モーションを生成する、14モデル統合の実験ランタイム(ライセンス未宣言)。