ResearchMan← Technology
Inpaint Canvas (ComfyUI-InpaintCanvas)
Tool条件付き (GPL-3.0)#CreatorTools#GenVideo

Inpaint Canvas (ComfyUI-InpaintCanvas)

DenRakEiw(個人開発者 Eiw / Dennis)/2026-09

Overview

ComfyUIの中に、写真編集ソフトのような『レイヤー編集キャンバス』を1個のノードとしてまるごと持ち込むツール。選択範囲を切り出してAI修正にかけ、結果を新しいレイヤーとして重ねる、を繰り返せる。

技術のポイント

普段ComfyUIで画像の一部だけを直したい(AI inpainting)ときは、マスク作成・切り抜き・生成・貼り戻しという複数のノードをその都度つなぎ直す必要があり、地味に手間がかかる。Inpaint Canvasは、PhotoshopやKrita(デジタルペイントソフト)のようなレイヤー編集画面をノード1個の中に丸ごと詰め込み、ブラシや矩形で選択するだけでなく、AI画像認識(Metaが開発したSAM2/SAM3)を使って『対象をクリックするだけ』『「顔」など言葉で指定するだけ』で選択範囲を作れる。選んだ部分は自動で切り出されてAI修正にかけられ、色味や境界をなじませたうえで新しいレイヤーとして戻ってくるので、直しては重ね、を1画面のまま繰り返せる。広告のキービジュアル制作なら、ロゴの差し替えや不要物の除去、人物の顔のリタッチなどを一人で素早く試行錯誤でき、最終的にはPSD形式でレイヤーごとデザイナーに渡したり、動画生成の参照フレームとして直接使ったりできる。

技術の詳細

仕組みとしては、キャンバス上で選んだ範囲を『crop_image』『crop_mask』という切り抜き画像として自作のAI修正の処理列(インペイントチェーン)に流し込み、戻ってきた結果を境界のぼかし・色合わせ・サイズ調整まで自動でこなした上で新しいレイヤーとして重ねる、という往復処理を1つのノードが担っている。対象物の選択にはブラシや投げ縄選択に加えて、マウスを乗せるだけで対象を認識するSAM2や、テキストで指定して選択できるSAM3/GroundingDINOといったAI画像認識モデルを使える。 従来のComfyUIでは、マスク作成・切り抜き・AI生成・合成をそれぞれ別ノードでつなぐため、直したい箇所が増えるほどノードの配線が複雑になっていた。Inpaint Canvasは、その一連の流れを1つの持続的なキャンバス(デスクトップの画像編集ソフトのようなレイヤー一覧、ソフトブラシ・スタンプ・修復ブラシ・グラデーション・文字入れなどの描画ツール、フィルムグレインやレベル補正・LUTなどの非破壊フィルターレイヤー)にまとめている点が大きな違い。 導入にはComfyUIのcustom_nodesフォルダにクローンするだけで無料で使え、GPUの追加要件は特にない。ただしSAM2/SAM3による『クリックで選択』機能を使うには対応する追加モデル(Kijai氏のComfyUI-segment-anything-2、comfyui-rmbgなど)を別途用意する必要があり、プロンプトの自動補完にはローカルのQwen3-VL 2BやGeminiを使う設定も用意されている。ライセンスはGPL-3.0。

License

ツールとして使うだけなら商用映像制作に利用制限はない。ただし改変版を配布・再頒布する場合はGPL-3.0に従いソースコード公開が必要。

Sources

Related Works

  • ComfyUI-LayerForge

    同様にPhotoshop風のレイヤーキャンバスをComfyUIに持ち込むノード

  • ComfyUI-LayerDivider

    SAMで画像を要素ごとに分割し、PSDレイヤーとして書き出すノード

  • ComfyTV

    キャンバスベースのComfyUIアプリで、SAM分割とPSD入出力を備える