日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
ロボットエージェント設計自動化arXiv:2610.42141

ロボットエージェント設計の自動化フレームワークRoboArchitect

RoboArchitect: Automating the Design of Robotic Agents with Persistent Memory

シェア:XThreadsFacebookLINEはてブBluesky

凍結したロボット方策の周囲に制御コード(ハーネス)を自動設計し、失敗診断と反復改善により未見環境での成功率を最大4.5倍に向上させた研究。

詳しい要約

1. どんなもの?

- ロボット制御のための agent harness を自動設計する手法 RoboArchitect の提案 - frozen robot policy を包む制御コード(harness)を coding model が自動生成・改訂 - 重み更新なしで未知シーン・未知タスクへの適応を狙う - 対象は複数の benchmark と複数の policy - 汎用 policy を包んで specialist 化する使い方も示す

2. 先行研究と比べてどこがすごい?

- 従来 harness は人手で構築し、新しい robot や benchmark ごとに再設計していた - 本研究はその設計自体を自動化する点が新しい - finetuning に代わる選択肢を提示 - モデル重みを一切更新せずに性能を大きく向上 - 汎用 policy を包んだ harness が finetuned 版をもしばしば上回る - policy の訓練データから遠い benchmark ほど利得が大きい

3. 技術・手法の肝は?

- coding model が robot の rollouts を観察し失敗を診断 - その診断に基づき frozen policy 周辺の harness を反復的に改訂 - harness は最適化用の episode 集合で進化させ、held-out の scene と task で評価 - harness が persistent memory も進化させる - 学習した経験(例: 有効な grasp 深さ)を後の判断に持ち越す - 制御戦略を自動設計(例: 詰まった arm を持ち上げる、上方が障害物なら水平に reach)

4. どうやって有効だと検証した?

- 複数の benchmark と複数の policy で評価 - 未知シーンで平均成功率 9.7% → 43.3%(4.5x) - 未知タスクで 12.7% → 40.2%(3.2x) - モデル重みは一切更新せずにこれらの改善を確認 - 汎用 policy を包んだ harness が finetuned 版をしばしば上回ることを確認

5. 議論はある?

- ロボット manipulation の大きな伸びしろは agent harness 側にあるという主張 - その設計は重み更新なしで自動化・最適化できると結論 - 自動設計された制御戦略や persistent memory の具体例を提示 - 限界や失敗事例、計算コスト、一般化の範囲については要旨からは不明

6. 次に読むべき論文は?

- 要旨で直接参照/比較されている研究は明示されていない - frozen robot policy を agent harness で包む先行研究(harness を人手構築する系統) - robot policy の finetuning による適応手法 - 関連する定番として coding model を用いた agent 設計、persistent memory を持つ agent 研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Shengguang Wu, Suning Huang, Cherie Ho, Ria Doshi, Hao Zhu, Serena Yeung-Levy

分類: cs.RO, cs.AI, cs.CV

原文アブストラクト

Recent work shows that a frozen robot policy performs far better inside an agent harness, where control code decides when to query the policy, consult vision tools, or command the arm directly. Yet today these harnesses are built by hand and redesigned for each new robot or benchmark. We show that harness design can be automated, offering a strong alternative to finetuning on a novel setup. In RoboArchitect, a coding model observes a robot's rollouts, diagnoses failures, and iteratively revises the harness around the frozen policy. The harness evolves on a set of episodes for its optimization and is evaluated on held-out scenes and tasks. Without updating any model weights, RoboArchitect raises average success from 9.7% to 43.3% on unseen scenes (4.5x) and from 12.7% to 40.2% on unseen tasks (3.2x), across multiple benchmarks and policies. The gains are largest where the benchmark is far from the policy's training data: wrapping a general-purpose policy, the evolved harness yields a specialist that often outperforms even the finetuned version. Intuitive control strategies are automatically designed, such as lifting a jammed arm clear or reaching in horizontally when an obstacle blocks the way from above. The harness also evolves its own persistent memory, carrying learned experience, such as effective grasp depths, into later decisions. These results suggest that substantial headroom in robotic manipulation lies in the agent harness, and its design can be effectively automated and optimized without weight updates.

PR本紙発行元 EmplifAI