日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2611.19081

RoboCoEvo:エージェントとポリシーの共進化によるロボット能力の拡張

RoboCoEvo: Expanding Robot Capabilities through Agent-Policy Co-Evolution

シェア:XThreadsFacebookLINEはてブBluesky

エージェントの失敗検出・回復プログラムとVLAモデルのパラメータ学習を相互に強化し合う共進化フレームワークを提案し、複数環境で性能向上を持続的に達成した。

詳しい要約

1. どんなもの?

- MLLM-based agent と robotic foundation model(VLA など)を統合したロボットシステムの能力拡張フレームワーク - 名称は RoboCoEvo - agent 側の改善とモデル側のパラメータ学習を相互に強化する co-evolution を狙う - 従来は agent とモデルの改善が切り離され、片方の進歩が他方に波及しにくい点を問題視 - failure-guided な枠組みで、agent の実行可能知識の洗練と VLA の post-training を連結する

2. 先行研究と比べてどこがすごい?

- 先行研究では MLLM-based agent と robotic foundation model の統合が注目される一方、両者の改善は decoupled で相乗効果が限定的だった - 本研究は agent とモデルを co-evolution させる点を主張 - agent の改善がモデル学習の corrective experience を生み、モデル改善が新たな failure distribution を通じて agent のプログラム改訂を導く循環を構成 - 単発の統合や片側のみの改善ではなく、反復的な相互強化を枠組みとして定式化している点が差分

3. 技術・手法の肝は?

- code-as-policy 定式化を採用 - agent が executable な failure-detection / recovery program を作成・洗練 - これにより targeted corrective experience を生成 - 得られた corrective behavior を post-training で robotic model の end-to-end policy に consolidation - 更新後 policy の failure distribution の変化を、次回の agent program 改訂にフィードバック - agent 側の explicit で reusable な executable knowledge の更新と、VLA の parameter learning を結合するループが肝

4. どうやって有効だと検証した?

- BEHAVIOR-1K、RoboCasa、RoboTwin 上で実験 - successive co-evolution rounds にわたり autonomous VLA task performance が持続的に改善したと報告 - 具体的な比較手法・指標・ablation の詳細は要旨からは不明

5. 議論はある?

- co-evolution の反復により性能が持続改善すると主張 - 一方で、各ベンチマークでの失敗分布の変化や post-training のコスト、agent program の汎化性などに関する議論の詳細は要旨からは不明 - 限界や失敗事例についても要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない - 関連手法として vision-language-action (VLA) models、MLLM-based agents、code-as-policy、failure detection and recovery、post-training を挙げる - 実験環境として BEHAVIOR-1K、RoboCasa、RoboTwin が参照されている

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ran Qi, Yixin Xiao, Dawei Wang, Zhiyuan Li, Jinbang Huang, Xuan Zhao, Yintao Ma, Yangzheng Wu, Tongtong Cao, Yingxue Zhang

分類: cs.RO

原文アブストラクト

Integrating MLLM-based agents with robotic foundation models has attracted increasing attention as a means of enhancing robotic capabilities. However, the improvement of such integrated systems remains largely decoupled across their agent and model components, with advances in one component not necessarily benefiting the other, substantially limiting the capabilities of the combined system. As both MLLMs and robotic foundation models become increasingly capable, fully realizing their combined potential calls for co-evolution, an iterative process in which improvements in agents and robotic foundation models reinforce one another. We propose RoboCoEvo, a failure-guided co-evolution framework that couples the refinement of the agent's explicit and reusable executable knowledge with parameter learning in robotic foundation models, such as vision-language-action (VLA) models. Through a code-as-policy formulation, the agent develops and refines executable failure-detection and recovery programs, generating targeted corrective experience. Post-training consolidates the resulting corrective behaviors into the robotic model's end-to-end policy, improving autonomous task execution. Changes in the updated policy's failure distribution, in turn, guide subsequent revisions to the agent's programs. Experiments on BEHAVIOR-1K, RoboCasa, and RoboTwin demonstrate sustained improvements in autonomous VLA task performance across successive co-evolution rounds.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2Google DeepMind、ロボット向けAIを発表新製品・発表
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  5. 5SoftBank主導、Agile Robotsが5億ドル調達 NVIDIAと日立も参加資金調達

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI