Canvas(macOSアプリ)

macOSアプリはWKWebViewを使ってエージェント制御のCanvasパネルを組み込んでいます。HTML/CSS/JS、A2UI、小規模なインタラクティブUI画面のための軽量なビジュアルワークスペースです。

Canvasの保存場所

Canvasの状態はApplication Support下に保存されます:

  • ~/Library/Application Support/OpenClaw/canvas/<session>/...

CanvasパネルはカスタムURLスキーム経由でこれらのファイルを配信します:

  • openclaw-canvas://<session>/<path>

例:

  • openclaw-canvas://main/<canvasRoot>/main/index.html
  • openclaw-canvas://main/assets/app.css<canvasRoot>/main/assets/app.css
  • openclaw-canvas://main/widgets/todo/<canvasRoot>/main/widgets/todo/index.html

ルートにindex.htmlがない場合、アプリは組み込みのスキャフォールドページを表示します。

パネルの動作

  • ボーダーレスでリサイズ可能なパネル。メニューバー付近(またはマウスカーソル付近)に固定。
  • セッションごとにサイズ/位置を記憶。
  • ローカルのCanvasファイル変更時に自動リロード。
  • 一度に表示されるCanvasパネルは1つのみ(必要に応じてセッションが切り替わる)。

Canvasは設定 → Canvasを許可から無効化できます。無効時、CanvasノードコマンドはCanvasCANVAS_DISABLEDを返します。

エージェントAPIサーフェス

CanvasはGateway WebSocket経由で公開されているため、エージェントは以下の操作が可能です:

  • パネルの表示/非表示
  • パスまたはURLへのナビゲーション
  • JavaScriptの実行
  • スナップショット画像のキャプチャ

CLI例:

openclaw nodes canvas present --node <id>
openclaw nodes canvas navigate --node <id> --url "/"
openclaw nodes canvas eval --node <id> --js "document.title"
openclaw nodes canvas snapshot --node <id>

注意:

  • canvas.navigateローカルCanvasパスhttp(s) URL、file:// URLを受け付けます。
  • "/"を渡すと、Canvasはローカルのスキャフォールドまたはindex.htmlを表示します。

CanvasでのA2UI

A2UIはGateway Canvasホストによってホストされ、Canvasパネル内でレンダリングされます。GatewayがCanvasホストをアドバタイズすると、macOSアプリは初回オープン時にA2UIホストページへ自動ナビゲートします。

デフォルトのA2UIホストURL:

http://<gateway-host>:18789/__openclaw__/a2ui/

A2UIコマンド(v0.8)

Canvasは現在A2UI v0.8のサーバー→クライアントメッセージを受け付けます:

  • beginRendering
  • surfaceUpdate
  • dataModelUpdate
  • deleteSurface

createSurface(v0.9)は未対応です。

CLI例:

cat > /tmp/a2ui-v0.8.jsonl <<'EOFA2'
{"surfaceUpdate":{"surfaceId":"main","components":[{"id":"root","component":{"Column":{"children":{"explicitList":["title","content"]}}}},{"id":"title","component":{"Text":{"text":{"literalString":"Canvas (A2UI v0.8)"},"usageHint":"h1"}}},{"id":"content","component":{"Text":{"text":{"literalString":"If you can read this, A2UI push works."},"usageHint":"body"}}}]}}
{"beginRendering":{"surfaceId":"main","root":"root"}}
EOFA2

openclaw nodes canvas a2ui push --jsonl /tmp/a2ui-v0.8.jsonl --node <id>

簡易テスト:

openclaw nodes canvas a2ui push --node <id> --text "Hello from A2UI"

Canvasからエージェント実行をトリガーする

Canvasはディープリンク経由で新しいエージェント実行をトリガーできます:

  • openclaw://agent?...

例(JSで):

window.location.href = "openclaw://agent?message=Review%20this%20design";

有効なキーが提供されない限り、アプリは確認プロンプトを表示します。

セキュリティに関する注意

  • Canvasスキームはディレクトリトラバーサルをブロックします。ファイルはセッションルート配下に存在する必要があります。
  • ローカルCanvasコンテンツはカスタムスキームを使用します(ループバックサーバー不要)。
  • 外部のhttp(s) URLは明示的にナビゲートされた場合のみ許可されます。