日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
安全性arXiv:2608.25091

自動スキルではなく自動ポリシー:物理世界のためのコンパイルされたエージェントスキル

Auto-Policy, not Auto-Skill: Compiled Agent Skills for the Physical World

シェア:XThreadsFacebookLINEはてブBluesky

スキル生成の自動化は効率向上に寄与するが安全性を欠くため、スキルに型付き権限層を組み込むEdge Skillguardを提案し、悪意あるスキルによる物理的危害を防ぐことを実証した。

詳しい要約

1. どんなもの?

本論文は、物理世界で動作するエージェントのスキル(Skill)に、手続き的知識だけでなく、型付きの呼び出しポリシー(typed invocation policy)を同梱する必要性を主張する。従来のスキルハーネス(AutoSkills, Hermes Agent)は効率性を向上させるが、安全性を無視している。特に、悪意のあるスキルが物理的害を引き起こす「Borrowed Authority」という攻撃クラスを定義し、それを防ぐための「Edge Skillguard」という型付き権限レイヤーを提案する。

2. 先行研究と比べてどこがすごい?

先行研究(AutoSkills, Hermes Agent)はスキルの自動生成による効率性向上に焦点を当てており、安全性のギャップを見落としている。本論文は、スキルが「どのように振る舞うか」ではなく「どの行動が許可されるか」を決定するポリシーの重要性を指摘し、スキルアーティファクト内に型付き権限レイヤーを組み込む点で新しい。また、悪意のあるスキルによる物理的害の報告がなかったことを指摘し、新たな攻撃クラスを定義している。

3. 技術・手法の肝は?

Edge Skillguardは、スキルアーティファクト内に埋め込まれた型付き権限レイヤーであり、ワークフローエンジンのようにツール間ではなく、スキル内部で動作する。ワールド状態とセンサー証拠に対するガードを提供し、エージェント間の権限要求を型付きで拒否できるようにする。これにより、物理的な行動がピアエージェントの主張ではなく、機械的に検証可能な証拠に依存するようにする。

4. どうやって有効だと検証した?

ライブエッジ制御プレーンテストベッド上で、5つの攻撃バリアントに対して60/60のBorrowed Authorityリクエストを拒否し、良性リクエストはブロックしないことを確認した。さらに、5倍のスケールとTailscaleメッシュ上の複数ホストでも結果が維持されることを示した。

5. 議論はある?

要旨からは、議論の詳細は不明だが、提案手法が高リスクスキルに型付き呼び出しポリシーを同梱することを提案しており、物理的害を防ぐための機械的検証の重要性を強調している。また、Borrowed Authority攻撃の実証が限定的である可能性や、実世界での適用可能性についての議論が考えられるが、要旨には明記されていない。

6. 次に読むべき論文は?

要旨で参照されている研究は、AutoSkills、Hermes Agent、悪意のあるスキルによるクラウドソフトウェア侵害、およびjailbroken LLM制御ロボットによる物理的害の報告である。次に読むべき論文としては、これらの関連研究が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhonghao Zhan, Hamed Haddadi

分類: cs.AI, cs.CR

原文アブストラクト

Self-evolving Skill harnesses (AutoSkills, Hermes Agent) generate more advisory orchestration automatically; their reported gains are efficiency, not safety. This misses the actual gap: a Skill describes how an agent should behave; a Policy decides which behavior is allowed to become an action. Today's format covers the first with markdown and scripts; the second is left to the model. Generating more Skills scales the gap, not the safety, especially when a wrong invocation can unlock a door or move money. Two adjacent attacks are documented: malicious skills compromising cloud software, and jailbroken LLM-controlled robots causing physical harm. Their intersection, malicious agent skills causing physical harm, follows directly but has not been reported. We name this class Borrowed Authority: Skills format gives the receiving agent no typed way to reject an inter-agent permission claim, so a malicious or misused Skill can drive actuation by attaching one. We propose Edge Skillguard, a typed authority layer that lives inside the Skill artifact rather than between tools as workflow engines do, with guards over world state and sensor evidence. On a live edge control-plane testbed, the guards reject 60/60 borrowed-authority requests across five attack variants without blocking benign requests, and the result holds at 5x scale and across hosts over a Tailscale mesh. These results suggest that high-risk Skills should co-package typed invocation policy with procedural knowledge, so that physical actions depend on machine-checkable evidence rather than peer-agent claims.

関連論文