日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ポリシー統合arXiv:2611.25575

軌道校正による身体性ポリシーの統合

Trajectory-Calibrated Merging of Embodied Policies

シェア:XThreadsFacebookLINEはてブBluesky

複数のロボット専門ポリシーを、実行時の軌道データで校正しながら勾配なしで単一ポリシーに統合する手法TCRを提案し、LIBEROで既存手法を上回る成功率を達成した。

詳しい要約

1. どんなもの?

- ロボット基盤モデルから派生した複数のタスク特化 policy(specialist)を、単一の policy に統合する手法 TCR(Trajectory-Calibrated Regression)の提案。 - 統合後も元の推論グラフを保持し、expert routing や追加の勾配学習を必要としない。 - 対象は embodied policy の merging で、closed-loop 実行時の挙動保持を重視する。

2. 先行研究と比べてどこがすごい?

- 既存の model-merging は parameter-space alignment が挙動の間接的な代理指標に過ぎず、closed-loop 実行で能力を安定的に保持できないと指摘。 - regression ベースの手法は calibration 入力がカバーしない状態での挙動保持に失敗しうる。 - LIBERO で 4 つの $\pi_{0.5}$ specialist を統合し 77.83% 成功。FeatCal、RegMean、direct weight averaging をそれぞれ 9.50、24.17、33.00 ポイント上回る。

3. 技術・手法の肝は?

- execution-aware かつ gradient-free な枠組み。2 つの相補的な timescale で calibration 入力を収集する。 - 一方はタスク実行の異なる段階を含む expert rollouts、他方は反復的な action generation 内の中間状態。 - merging による representation shift を考慮し、各 block の入力を既に統合済みの block を通して再計算。 - 各 expert の block 内計算から module 入力を形成し、expert の線形出力に一致するよう merged weights を fit。 - 別々の rollout cache を用いる two-pass calibration で、凍結した specialist を teacher として統合 policy を精緻化。

4. どうやって有効だと検証した?

- LIBERO 上で 4 つの $\pi_{0.5}$ specialist を統合し、1,200 evaluation episodes で 77.83% の成功率を報告。 - FeatCal、RegMean、direct weight averaging との比較でそれぞれ 9.50、24.17、33.00 ポイントの改善を示す。 - 詳細な実験設定や ablation は要旨からは不明。

5. 議論はある?

- parameter-space alignment や regression の限界を挙動保持の観点から議論し、closed-loop 実行を意識した calibration の必要性を主張。 - representation shift への対処や two-pass calibration の設計意図が示される。 - 限界・失敗事例・計算コスト・スケーラビリティに関する議論は要旨からは不明。

6. 次に読むべき論文は?

- FeatCal - RegMean - direct weight averaging - $\pi_{0.5} - LIBERO

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Wenshuo Chen, Honglei Jin, Le Yang, Jianfei Song, Shaofeng Liang, Lei Wang, Junze Zhu, Kailong Wang, Zhengxi Jin, Haozhe Jia, Honglin Chu, Songning Lai, Xiucheng Wang, Yutao Yue

分類: cs.RO, cs.CV

原文アブストラクト

Robot foundation models are increasingly adapted into task specialists to expand their embodied capabilities. Yet these capabilities remain fragmented across separate policies, and existing model-merging methods do not reliably preserve them during closed-loop execution: parameter-space alignment provides only an indirect proxy for behavior, while regression may fail to preserve behavior at states not covered by its calibration inputs. We present Trajectory-Calibrated Regression (TCR), an execution-aware, gradient-free framework that consolidates robot specialists into a single policy. Across two complementary timescales, TCR collects calibration inputs from expert rollouts spanning different stages of task execution and from intermediate states within iterative action generation. To account for representation shifts introduced by merging, TCR recomputes each block's input through the already merged blocks. It then uses each expert's computation within the block to form module inputs and fits merged weights to match the experts' linear outputs. A two-pass calibration procedure further refines the merged policy using separate rollout caches while retaining the frozen specialists as teachers. The resulting model preserves the original inference graph and requires neither expert routing nor additional gradient training. On LIBERO, TCR merges four $π_{0.5}$ specialists and achieves 77.83% success across 1,200 evaluation episodes, outperforming FeatCal, RegMean, and direct weight averaging by 9.50, 24.17, and 33.00 percentage points, respectively.

  1. 1パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  2. 2川崎重工業のロボット外販を報道新製品・発表
  3. 3Boston Dynamics、GlobalFoundriesでAtlasを試験へ 半導体製造で2027年初頭から半導体・GPU
  4. 4丸文、RealManのロボットアームやヒューマノイドを国内販売提携・買収
  5. 5NVIDIA、SC26で科学研究向けAIエージェントとHPC基盤を発表新製品・発表

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI