日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2611.19324

MARS: 強化学習で獲得した原子スキルを動的にルーティングする多段階ロボットマニピュレーション

MARS: Dynamic Routing of Reinforcement-Learned Atomic Skills for Multi-Stage Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

汎用VLAポリシーと強化学習で訓練した複数の専門スキルポリシーを組み合わせ、Mambaベースの動的ルーターで把持・整列・挿入などの段階に応じて適切なスキルを選択する枠組みを提案した論文。

詳しい要約

1. どんなもの?

- 多段階ロボットマニピュレーションのための動的ルーティングフレームワーク MARS (Modular Atomic-skill Routing System) - 凍結した generalist VLA policy と、複数の独立学習された atomic skill policies を統合 - 把持・位置合わせ・挿入などの critical manipulation stages での制御精度・実行安定性の向上を狙う - 高レベル方策選択のため、temporal context と skill semantics を統合する dynamic router を開発

2. 先行研究と比べてどこがすごい?

- 汎用 VLA は多タスク操作に強いが critical stages での精度・安定性に限界 - 汎用能力とタスク特化の fine-grained control を組み合わせ、多段階タスク全体で両者を協調させる点が特徴 - MLP-based router と比較し、固定軌道評価で平均 Macro-F1 90.47% と 7.08 ポイント上回る - Tube Transport タスクで full-task success rate が 20.04% から 85.67% へ向上

3. 技術・手法の肝は?

- frozen generalist VLA policy と複数の atomic skill policies を併用 - 共有 RL Token state representation と VLA の reference action を用い、critical stages ごとに specialized control policies を RL で最適化 - dynamic router は Mamba-based recurrent encoding と historical feature window で状態遷移を捕捉 - 候補方策の skill descriptions を semantic queries に符号化し、attention で skill semantics と temporal state features を対応付け

4. どうやって有効だと検証した?

- 4 つの LIBERO task suites で固定軌道評価を実施し、平均 Macro-F1 90.47% を達成 - MLP-based router との比較で 7.08 ポイントの改善を確認 - シミュレーションの Tube Transport タスクで full-task success rate を 20.04% から 85.67% へ改善 - 段階特化 RL と temporal state-aware dynamic policy routing の有効性を示す結果

5. 議論はある?

- 段階特化 RL と temporal state-aware な動的方策ルーティングが多方策協調と全体実行性能を改善し得ると主張 - 評価は LIBERO とシミュレーション Tube Transport が中心で、実機検証や他タスクへの一般化は要旨からは不明 - router の誤選択や方策間切替の安定性に関する詳細な議論は要旨からは不明

6. 次に読むべき論文は?

- 比較対象の MLP-based router に関する研究 - 基盤となる generalist VLA policy および Vision-Language-Action モデルの関連研究 - Mamba-based recurrent encoding を用いた系列モデリング研究 - LIBERO ベンチマークおよび Tube Transport タスクの関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zequan Zeng, Junqin Yang, Kai Wang

分類: cs.RO

原文アブストラクト

Vision-Language-Action (VLA) models have demonstrated strong capabilities in multi-task robotic manipulation. However, they still face limitations in control precision and execution stability during critical manipulation stages, such as object grasping, alignment and insertion. To combine general-purpose manipulation capabilities with task-specific fine-grained control, while enabling effective coordination between generalist and specialized policies throughout multi-stage manipulation tasks, this paper proposes MARS (Modular Atomic-skill Routing System), a dynamic routing framework for reinforcement learning-based atomic skills. MARS integrates a frozen generalist VLA policy with multiple independently trained atomic skill policies. Using a shared RL Token state representation and the reference action of VLA, specialized control policies are optimized through reinforcement learning for different cr`itical manipulation stages. For high-level policy selection, we develop a dynamic router that integrates temporal context and skill semantics. The router employs Mamba-based recurrent encoding and a historical feature window to capture state evolution during manipulation. Skill descriptions of candidate policies are encoded into semantic queries, and attention mechanisms are used to establish correspondences between skill semantics and temporal state features. Experimental results show that MARS achieves an average Macro-F1 score of 90.47% across four LIBERO task suites under fixed-trajectory evaluation, outperforming an MLP-based router by 7.08 percentage points. In the simulated Tube Transport task, the full-task success rate increases from 20.04% to 85.67%. These results demonstrate that stage-specific reinforcement learning and temporal state-aware dynamic policy routing can improve multi-policy coordination and overall task execution performance in multi-stage robotic manipulation.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2Google DeepMind、ロボット向けAIを発表新製品・発表
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  5. 5SoftBank主導、Agile Robotsが5億ドル調達 NVIDIAと日立も参加資金調達

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI