日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ロコマニピュレーションarXiv:2611.24011

WAM-Policy:四足ロコマニピュレーションのためのオンポリシー蒸留付きワールドアクションモデル

WAM-Policy: World Action Models with On-Policy Distillation for Quadrupedal Loco-Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

腕なし四足ロボットの言語指示付きロコマニピュレーションのため、腕向けワールドアクションモデルを二段階(形態適応+強化学習とマルチ教師蒸留)で転移し、高速・高精度な方策を実現した。

詳しい要約

1. どんなもの?

- 腕なし四足ロボットが前脚1本で操作しつつ3脚で歩行する loco-manipulation を、言語指示に従って実行するポリシー - World Action Models (WAMs) を四足の loco-manipulation ポリシーへ変換する WAM-Policy を提案 - 2段階構成: (1) Cross-Morphology Policy Adaptation and Acceleration、(2) Task-Specific Improvement and Merging - QLM-Bench(テレオペなしで合成した1,000デモ、10タスク)で評価し、実機 Unitree Go2 Air にも展開

2. 先行研究と比べてどこがすごい?

- 既存の腕なし四足 loco-manipulation ポリシーは言語指示に従うものがなかった(要旨の主張) - WAMs は言語条件付き操作ポリシーとして有効だが、ロボットアーム向けに事前学習され推論が遅い - WAM-Policy はアーム中心 WAM を四足へ適応しつつ、蒸留で推論を高速化 - OPSD 学生は精度76.7%を保ちつつ14倍高速サンプリング、さらに RL と M-OPD で85.0%へ向上

3. 技術・手法の肝は?

- 第1段 Cross-Morphology Policy Adaptation and Acceleration: アーム中心 WAM を四足へ適応し、on-policy self-distillation (OPSD) で1 video step・2 action step の学生へ蒸留 - 第2段 Task-Specific Improvement and Merging: 教師を reinforcement learning (RL) でタスク別に改善し、multi-teacher on-policy distillation (M-OPD) で複数の遅い specialist を1つの few-step 学生へ統合 - 学生は教師の模倣範囲に縛られるため、RL で教師を強化する設計

4. どうやって有効だと検証した?

- QLM-Bench の10シミュレーションタスク、テレオペなしで合成した1,000デモで評価 - 転送ポリシーは77.0%、OPSD 学生は76.7%を維持しつつ14倍高速 - タスク別 RL と M-OPD で85.0%へ向上 - OPSD 学生を実機 Unitree Go2 Air に展開

5. 議論はある?

- 学生は教師に性能上限を縛られる点を明示し、RL による教師改善で対処 - 実機展開は OPSD 学生のみで、RL/M-OPD 後の学生の実機評価は要旨からは不明 - 実機での成功率や言語指示の汎化範囲は要旨からは不明 - シミュレーションは合成デモ依存であり、実世界デモとの差の議論は要旨からは不明

6. 次に読むべき論文は?

- World Action Models (WAMs) の原論文(アーム向け事前学習) - on-policy self-distillation (OPSD) および multi-teacher on-policy distillation (M-OPD) の関連研究 - 腕なし四足 loco-manipulation の先行ポリシー研究 - QLM-Bench のベンチマーク論文 - 言語条件付き操作の定番手法(例: diffusion policy、vision-language-action モデル)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Junlin Long, Xu Deng, Yiran Wang, Yue Yang, Yang Zhao, Zeyu Zhang

分類: cs.RO, cs.CV

原文アブストラクト

Arm-free quadrupeds can perform loco-manipulation, walking on three legs while manipulating with a front leg, yet no existing policy for it follows language instructions. World action models (WAMs) have emerged as effective language-conditioned manipulation policies, but are pretrained for robot arms and sample slowly. WAM-Policy turns one WAM into a quadrupedal loco-manipulation policy via two stages. The first, Cross-Morphology Policy Adaptation and Acceleration, adapts the arm-centric WAM to quadrupeds and distills the transferred policy into a student with one video and two action steps by on-policy self-distillation (OPSD). This student, however, is bounded by its teacher, which only imitates demonstrations. The second stage, Task-Specific Improvement and Merging, therefore tunes the teacher by reinforcement learning (RL) and merges the slow specialists into one few-step student by multi-teacher on-policy distillation (M-OPD). On QLM-Bench, ten simulated tasks with 1,000 demonstrations synthesized without teleoperation, the transferred policy reaches 77.0%, and the OPSD student keeps 76.7% while sampling 14 times faster. Task-specific RL and M-OPD lift it to 85.0%. We also deploy the OPSD student on a real Unitree Go2 Air. WAM-Policy thus achieves a stronger quadrupedal policy at a fraction of the inference cost.

関連論文

  1. 1パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3日経クロステック、NVIDIA取締役会のファンCEO解任議論を報道 同社は同日、辞任を発表業界動向
  4. 4NVIDIA、ヒトの動きをロボットに適応する「SOMA Retargeter」を紹介研究・技術
  5. 5ティアフォーとTUM、Autowareでミュンヘン大型路線バスの自動運転開発を支援提携・買収

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI