日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2611.26341

必要な時だけ推論: 長期的ロボット操作のための効率的エージェント制御

Reasoning on Call: Efficient Agentic Robot Control for Long-Horizon Robot Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

低レベル方策と高レベル推論エージェントをオンライン監視で連携させ、必要な時だけエージェントを呼ぶことで、長期的操作タスクの成功率を高めつつトークン消費を大幅に削減したフレームワーク。

詳しい要約

1. どんなもの?

- 長期的なロボットマニピュレーションを対象に、低レベル policy と高レベル reasoning agent を online task-state monitor で協調させるフレームワーク RoC (Reasoning on Call) - モデル呼び出しの頻発による latency と token コストを抑えるため、agent の支援・介入を必要な時だけ呼び出す仕組みを狙う - 誤りが robot execution の修正・subtask planning の修正・その両方のどれを要するかを見極める点を中心課題とする

2. 先行研究と比べてどこがすごい?

- 常時モデルを呼ぶ agent ベース手法に対し、event-triggered な agent review により呼び出しを削減 - RMBench で最強の agent-based baseline 比で task success rate を 24.0 percentage points 向上、token 消費を 65.3% 削減 - 最強の policy-based baseline 比でも task success rate を 15.1 percentage points 上回る - 実行修正と計画修正を協調的に扱う点が従来との差異として示される

3. 技術・手法の肝は?

- 低レベル policy と高レベル reasoning agent を online task-state monitor で仲介 - monitor は temporal visual observations と ordered interaction memory を組み合わせ、現在の subtask 内の progress 推定と successor 予測を同時に行う - これらの予測が event-triggered agent review を導き、execution repair と plan revision を協調させる - 検証済みの outcome が memory 更新と subtask transition を統制し、通常実行は policy に任せ、判断が必要な場面に reasoning を集中させる

4. どうやって有効だと検証した?

- RMBench 上で評価し、agent-based baseline および policy-based baseline と比較 - task success rate と token 消費量の両面で改善を報告 - 実世界実験で 3 つの long-horizon manipulation task にわたり有効性を確認 - 具体的なタスク内容や被験条件は要旨からは不明

5. 議論はある?

- 要旨からは不明 - 想定される論点として、monitor の progress/successor 予測の誤りや event trigger の閾値設計、実世界での汎化性が考えられるが、要旨に明記はない

6. 次に読むべき論文は?

- 要旨で参照/比較されている agent-based baseline および policy-based baseline の各研究(個別名は要旨からは不明) - RMBench に関する論文 - 関連手法として large multimodal models を用いた long-horizon robot manipulation の研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zilang Cen, Chao Tang, Fangcheng Liu, Weishi Mi, Wei Hao, JiaYu Xu, Dehao Huang, Yehui Tang, Xiaohui Cui, Tingguang Li, Xiaoyuan Zhang

分類: cs.RO

原文アブストラクト

Large multimodal models can support long-horizon robot manipulation, but frequent model calls incur substantial latency and token costs. The central challenge is determining when agent assistance or intervention is needed and whether errors require correcting robot execution, subtask planning, or both. To address this problem, we propose RoC (Reasoning on Call), an efficient framework that coordinates a low-level policy and a high-level reasoning agent through an online task-state monitor. The monitor combines temporal visual observations with ordered interaction memory to jointly estimate progress within the active subtask and predict its successor. These predictions guide event-triggered agent review for coordinated execution repair and plan revision. Verified outcomes govern memory updates and subtask transitions, allowing routine execution to remain with the policy while reasoning focuses on decisions requiring additional assessment. On RMBench, RoC improves task success rate by 24.0 percentage points and reduces token consumption by 65.3% compared with the strongest agent-based baseline. It also outperforms the strongest policy-based baseline by 15.1 percentage points in task success rate. Real-world experiments further validate its effectiveness across three long-horizon manipulation tasks. Overall, RoC supports efficient agent intervention and coordinated recovery across execution and planning for long-horizon robot manipulation.

関連論文

  1. 1パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  2. 2川崎重工業のロボット外販を報道新製品・発表
  3. 3Boston Dynamics、GlobalFoundriesでAtlasを試験へ 半導体製造で2027年初頭から半導体・GPU
  4. 4NVIDIA、ヒトの動きをロボットに適応する「SOMA Retargeter」を紹介研究・技術
  5. 5丸文、RealManのロボットアームやヒューマノイドを国内販売提携・買収

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI