日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
模倣学習arXiv:2610.17748

I3L: 全身移動マニピュレーションのための反復対話型模倣学習

I3L: Iterative Interactive Imitation Learning for Whole-Body Mobile Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

低コストな操作インターフェースと反復的な方策改善を組み合わせ、全身移動マニピュレーションのオフライン学習の失敗を修正するシステムを提案。実機とシミュレーションで成功率を大幅に向上させた。

詳しい要約

1. どんなもの?

- オフラインで学習した方策は、訓練分布外で性能が劣化する。 - 特に long-horizon whole-body mobile manipulation では、長い horizon が誤差を蓄積し、arm・torso・base の協調動作のため網羅的なデモ収集が非現実的。 - この last-mile reliability gap を埋めるため、whole-body correction と iterative policy refinement を統合したハードウェア・学習システム I3L を提案。 - 低コスト・オープンソースの JoyLo+ インタフェースは、policy-tracking leader arms と touch-triggered takeover を用い、身体部位をまたぐ協調的な修正を可能にする。 - 反復的な deployment と retraining により、更新された方策の失敗をオペレータが狙って修正できる。

2. 先行研究と比べてどこがすごい?

- 従来のオフライン学習は teleoperated demonstrations のみに依存し、分布外で劣化する。 - 同じ訓練軌道数で demonstration-only training と比較して、平均 35.6 percentage points 上回る。 - ベース方策と比べ自律成功率を平均 68.3 percentage points 改善し、全タスクで少なくとも 90% の成功率を達成。 - 4 ラウンドの HG-DAgger が両タスクで最高の最終成功率を示すことを制御されたシミュレーション実験で確認。 - エピソードあたりの takeover duration が 4 ラウンドで平均 72% 減少。

3. 技術・手法の肝は?

- ハードウェアと学習を統合した I3L システム。 - JoyLo+ インタフェース: 低コスト・オープンソースで、policy-tracking leader arms と touch-triggered takeover を備える。 - whole-body correction: arm・torso・base にまたがる協調的な修正を可能にする。 - iterative policy refinement: 反復的な deployment と retraining により、更新方策の失敗をターゲットにする。 - 制御されたシミュレーション実験では 4 ラウンドの HG-DAgger プロトコルを採用。

4. どうやって有効だと検証した?

- 3 つの robot embodiments と 8 つの simulated and real-world tasks で評価。 - うち 4 つは long-horizon whole-body mobile manipulation tasks。 - 制御されたシミュレーション実験で、4 ラウンドの HG-DAgger が両タスクで最高の最終成功率を達成。 - このプロトコル下で、ベース方策比で自律成功率が平均 68.3 percentage points 向上し、全タスクで少なくとも 90% 成功。 - 同じ訓練軌道数で demonstration-only training を平均 35.6 percentage points 上回る。 - エピソードあたりの takeover duration が 4 ラウンドで平均 72% 減少。

5. 議論はある?

- I3L はオフライン訓練と信頼性の高い deployment の間の last-mile gap を埋めるのに役立つことを示す。 - long-horizon whole-body mobile manipulation のための修正の収集と利用に関する実践的な知見を提供。 - 具体的な限界や失敗事例、議論の詳細は要旨からは不明。

6. 次に読むべき論文は?

- HG-DAgger(要旨で比較・採用されている手法) - demonstration-only training(要旨で比較されているベースライン) - whole-body mobile manipulation に関する関連研究(要旨で具体的な参照論文は不明)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Wensi Ai, Christopher Luey, Karthik Dharmarajan, Evans Han, Yunfan Jiang, Stef Ren, Jianwen Xie, Jiajun Wu, Li Fei-Fei, Ruohan Zhang

分類: cs.RO, cs.AI

原文アブストラクト

Policies trained offline from teleoperated demonstrations can degrade outside their training distribution. This gap is particularly acute in long-horizon whole-body mobile manipulation, where long horizons amplify compounding errors and coordinated arm, torso, and base motion makes exhaustive demonstration coverage impractical. We introduce I3L, an integrated hardware and learning system that combines whole-body correction with iterative policy refinement to address this last-mile reliability gap. Its low-cost, open-source JoyLo+ interface uses policy-tracking leader arms and touch-triggered takeover to enable coordinated corrections across the body parts, while iterative deployment and retraining allow operators to target failures of the updated policy. We evaluate I3L across three robot embodiments and eight simulated and real-world tasks, including four long-horizon whole-body mobile manipulation tasks. Controlled simulation experiments show that four-round HG-DAgger achieves the highest final success on both tasks. Under this protocol, I3L improves autonomous success over the base policies by an average of 68.3 percentage points and achieves at least 90% success on every task, outperforming demonstration-only training by 35.6 percentage points on average with the same number of training trajectories. Averaged across tasks, takeover duration per episode decreases by 72% over four rounds. Together, these results show that I3L helps close the last-mile gap between offline training and reliable deployment and provides practical insights into collecting and using corrections for long-horizon whole-body mobile manipulation. Videos, visualizations, and appendix are at https://i-3l.github.io/.

関連論文

PR本紙発行元 EmplifAI