日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
モバイルマニピュレーションarXiv:2610.19600

モバイルマニピュレーションの突破口:失敗診断からエージェント型ロボットシステムへ

Cracking Mobile Manipulation: From Failure Diagnosis to Agentic Robot System

シェア:XThreadsFacebookLINEはてブBluesky

長期的なモバイルマニピュレーションの失敗を診断し、計画・ナビゲーション・操作の各段階に介入するエージェントシステムを開発。成功率を19%から49%に向上させた。

詳しい要約

1. どんなもの?

本論文は、long-horizon mobile manipulation における VLA モデルの性能ギャップを failure diagnosis に基づいて解消する agentic robot system を提案する。pretrained subtask VLA は atomic manipulation で 80% 成功するが、mobile manipulation に組み合わせると 19% に低下する。この原因を実行過程の失敗と捉え、task planning、navigation and base positioning、local manipulation の 3 領域に診断し、failure-guided agentic intervention を開発。RoboCasa365 で 19%→47%、held-out episode seeds で 49%(baseline 18%)、BEHAVIOR-1K で 14%→37%、real-robot で 5/20→13/20 を達成。

2. 先行研究と比べてどこがすごい?

従来の VLA モデルは local robot manipulation で高い性能を示すが、long-horizon mobile manipulation にはその成功が直接転移しない。本研究は、単に基盤 policy を均一にスケールするのではなく、実行過程の失敗を診断し、現在のボトルネックに介入する点が新しい。これにより、固定された subtask VLA を拡張し、RoboCasa365 で 19%→49%、BEHAVIOR-1K で 14%→37%、real-robot で 5/20→13/20 と大幅に改善。failure-guided agentic intervention という枠組みを提示した点が先行研究と異なる。

3. 技術・手法の肝は?

技術の肝は、long-horizon mobile manipulation の失敗を task planning、navigation and base positioning、local manipulation の 3 領域に分類し、それぞれに対して failure-guided agentic intervention を行う点。具体的には、demonstration-based planning guidance、adaptive visual memory、accessibility-aware base adjustment、local end-effector adjustment を固定 subtask VLA に追加する。これにより、基盤 policy を再学習せずに、実行過程のボトルネックを逐次解消する。

4. どうやって有効だと検証した?

RoboCasa365 において、介入を段階的に適用することで task success が 19% から 47% に向上し、最終システムは held-out episode seeds で 49% を達成(baseline は 18%)。さらに BEHAVIOR-1K で 14% から 37% へ、real-robot tasks で 5/20 から 13/20 へ改善することを確認。これらの実験により、failure-guided agentic intervention の有効性を検証している。

5. 議論はある?

本論文は、信頼性の高い mobile manipulation を進展させるには、基盤 policy を均一にスケールするのではなく、現在のボトルネックを診断し介入することが重要だと主張する。ただし、failure diagnosis の一般性や、他のタスク・環境への転移可能性、介入の設計コストなどについては要旨からは不明。また、real-robot での評価は 20 試行中 13 成功であり、さらなる改善の余地がある。

6. 次に読むべき論文は?

要旨で参照/比較されている研究として、vision-language-action (VLA) モデル、pretrained subtask VLA、RoboCasa365、BEHAVIOR-1K が挙げられる。関連手法として、long-horizon mobile manipulation における task planning、navigation and base positioning、local manipulation の既存研究や、agentic intervention を用いたロボットシステムの論文を読むべき。具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zixuan Wang, Jia-Ning Li, Yinzhou Tang, Yanzhao Yu, Biao Wu, Meng Fang, Xin Li, Yiwu Zhong

分類: cs.RO

原文アブストラクト

Recent vision-language-action (VLA) models have shown strong performance on local robot manipulation, yet their success does not readily translate to long-horizon mobile manipulation. In our experiments, a pretrained subtask VLA achieves 80% success rate on atomic manipulation tasks but only 19% when these skills are composed into mobile manipulation. We argue that this gap stems from failures across the execution process rather than from local manipulation capability alone. To uncover these bottlenecks, we systematically diagnose failures in long-horizon mobile manipulation and identify three dominant regimes: task planning, navigation and base positioning, and local manipulation. Based on this diagnosis, we develop failure-guided agentic intervention that augments a fixed subtask VLA with demonstration-based planning guidance, adaptive visual memory, accessibility-aware base adjustment, and local end-effector adjustment. On RoboCasa365, these interventions progressively improve task success from 19% to 47%, with the finalized system reaching 49% on held-out episode seeds, compared with 18% for the baseline. The same design improves performance from 14% to 37% on BEHAVIOR-1K and from 5/20 to 13/20 on real-robot tasks. These results suggest that reliable mobile manipulation can be advanced by diagnosing and intervening on the current bottleneck, rather than uniformly scaling the underlying policy. Our code will be released at https://github.com/PKU-VaLuE-Lab/Cracking-Mobile-Manipulation.git.

関連論文

PR本紙発行元 EmplifAI