Akatz Labs (akatz-ai)/2026-10
動画内で緑にマスクした人物をAIで消し、背景を補完して復元するMiniMax H3用LoRAとComfyUIワークフロー。
動画から特定の人物だけをマスクで指定して消し、背景を自然に埋めてくれるのがすごい点です。カメラの動きや映像のタイミング、元の音声はそのまま保たれます。従来は1コマずつ背景を描き足すロトペイントやクリーンプレート撮影が必要で、手間のかかる作業でした。このLoRAは、SAM 3.1という人物追跡AIでマスクを作り、一定の長さの区間ごとに生成し直す「ウィンドウ再生成」の手順をワークフローとして公開しています。広告では、ロケで映り込んだ通行人やスタッフの除去、コンプライアンス上映せない人物の差し替え準備、複数テイクから不要な人物を取り除いた合成カットの作成などに使えそうです。1080p・音声付きの8つの作例GIF/動画が公開されています。
仕組みは、MiniMax H3という音声付き動画生成モデルの参照入力機能(Ref2VA)に、人物除去専用に学習した小さな追加モジュール(LoRA)を足すものです。学習は静止ペア128組、動くマスク付き抜粋80本(20シーン)、保持用クリップ6本を、2,000ステップ学習しています。入力動画の緑色マスク部分を「消して背景を再構成せよ」という指示として扱います。たとえるなら、写真編集のコンテンツ認識塗りつぶしを動画に拡張したものです。 従来のAI動画インペイント(穴埋め)は、人物が動くと背景が揺れたり、音と映像がずれたりしがちでした。このLoRAはカメラの動きを保ったまま生成し、区間をまたぐ処理も含めたワークフローが付属しています。ただし作者自身が「実験的」と明記しており、あらゆる映像で完璧に消えるわけではありません。 使うには、ネイティブのMiniMax H3とSAM 3.1に対応したComfyUI、H3 Ref2VA(INT8)、Qwen3-VLテキストエンコーダ、映像・音声VAEが必要です。RTX 4090で検証されており、映像は24fps、縦横32の倍数にそろえます。ライセンスは地域制限付きのMiniMax H3コミュニティライセンスで、米国・EU・英国・韓国は対象外です。
MiniMax H3 Community License Agreement。米・EU・英・韓国は利用地域から除外される領域制限あり。実使用前に要確認