arXiv論文「Embodied Skill Bench」、身体性スキル付きエージェントの物理タスク性能を比較

何が起きたか

arXivは2026年10月12日、論文「Embodied Skill Bench: Benchmarking How Well Agents with Embodied Skills Perform on Physical Tasks」を公開した。論文は、身体性を前提とする行動・知覚・経験スキルを250件まとめ、閉ループで物理タスクを評価するベンチマーク「EmbodiedSkillBench」を提案している。評価は100件の摂動を加えたLIBERO-Proタスク上で、4つのエージェントを対象に行われた。 比較は、ネイティブ制御、スキルのみで実行する方式、そして著者らが提案するAgent-Directed Reuse（ADR）の3モードで行われた。論文によると、スキルのみの実行ではGPT-5.6-Solが11%から63%に上がり、Kimi-K3とClaude-Opus-5も約20ポイント改善した一方、GPT-6-Astraは92%から61%に低下した。ADRではGPT-6-Astraが85%まで回復し、トークン使用量は14.1%減、実行時間は11.9%短くなった。

詳細

論文は、1,052件の資源を基に250件のスキルを構成したとしている。内訳は行動、知覚、経験の各スキルで、各スキルには身体性に関する明示的な前提条件と利用条件が付される。EmbodiedSkillBenchは、観測と行動の閉ループでエージェントを動かし、成功率、行動、トークン数、壁時計時間を記録する設計である。 著者らが提案するADRは、エージェントが自前の制御を維持したまま、各スキルを呼び出すか、修正するか、無視するかを選ぶ方式である。論文では、Jevを動作方向とグリッパー動作を選ぶスキルとして用いた場合、81%の成功率を得ながらトークン使用量を50%減らし、時間を57%短縮したとしている。

Key Facts

本紙の見方

この論文の新しさは、単に物理タスクの成績を測るのではなく、身体性スキルを「使うべきか、修正すべきか、捨てるべきか」まで含めて評価軸にした点にある。250件のスキルを1,052件の資源から構成し、成功率だけでなくトークン数と壁時計時間も同時に追う設計は、LLMエージェントの物理制御を能力評価と計算コスト評価の両面から見る枠組みだといえる。一方で、100件の摂動付きLIBERO-Proという限定された環境での結果であり、汎化の幅はまだこの論文だけでは決められない。 本紙の見方として重要なのは、スキルの価値がエージェントの強さで逆転している点である。GPT-5.6-Solは11%から63%へ、Kimi-K3とClaude-Opus-5も約20ポイント改善したが、GPT-6-Astraはスキルのみだと92%から61%へ落ちた。つまり、身体性スキルは弱いエージェントには不足能力の補完として効く一方、強いエージェントには制約として働きうる。ここでADRが85%まで回復させたことは、スキルの総入れ替えではなく選択的再利用が必要だという論点を示す。 業界構造への含意は、フィジカルAIの競争軸が「より多くのスキルを持つこと」から「既存制御を残しつつ、どのスキルをどの条件で差し込むか」に移りうる点にある。成功率だけでなく、トークンと時間を削れるかが評価対象になったことで、推論コストと制御性能の両立が中心論点になる。これはVLA政策、知覚モデル、手続き知識をモジュールとして束ねる現在の設計に対し、再利用の粒度と条件設定がボトルネックになり得ることを示す。なお、論文が示したのは4エージェントとLIBERO-Pro上の比較であり、実機ロボットや別ドメインで同じ傾向が続くかは未確定である。今後は、スキルの選択基準、対象タスクの拡張、実機での安定性、そしてADRがどの条件で有効かを確認する必要がある。

なぜ重要か

この論文は、身体性スキルが「追加すれば良い」部品ではなく、エージェントの既存能力を上回る部分でのみ有効になりやすいことを示した。論文の結果では、強いモデルほどスキルのみ実行で成績が落ちる一方、ADRのように選択的に再利用すると性能とコストを両立できる可能性がある。

日本への影響

日本のロボット研究や実装では、単体の技能モジュールの追加よりも、既存の制御系と外部スキルをどう選択統合するかが論点になりうる。特に、フィジカルAIの評価を成功率だけでなくトークン数と時間まで含めて見る設計は、実運用での計算資源制約を重視する開発に接続しやすい。