日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

歩行arXiv:2611.23102

CADENCE:モデルベース四足歩行のための非周期的歩容を学習する

CADENCE: Learning Acyclic Gaits for Model-Based Quadruped Locomotion

シェア:XThreadsFacebookLINEはてブBluesky

強化学習でステップ計画を学習し、固定周期や順序に縛られない非周期的な歩容を獲得、不整地での歩行成功率を向上させた。

詳しい要約

1. どんなもの?

- 四足歩行ロボットのための学習ベースのstep planner「CADENCE」 - 従来のmodel-based controllerは固定周期・固定順序のcyclic gaitに依存 - CADENCEは40 msごとに最大65の離散選択(no step または1脚のsafe footholdへのstep)とswing timeを予測 - convex MPC(model predictive controller)上でreinforcement learningにより訓練 - gait scheduleやrewardのgait項なしで、非周期的(acyclic)なgaitを獲得

2. 先行研究と比べてどこがすごい?

- 従来のmodel-based quadruped controllerはcyclic gaitを前提とし、安全なfootholdがあっても固定順序・固定周期で脚を上げる - CADENCEはgait scheduleもgait reward項も持たず、stepごとのコストのみで学習 - 結果として固定周期・固定順序を持たないacyclic gaitを獲得 - 比較対象のOCS2-Trot(67.8%)、OCS2-Single(65.5%)を上回る85.1%の成功率 - 静歩行ablation(39.6%)と比べても大幅に高い

3. 技術・手法の肝は?

- 小さなaction spaceの学習済みstep planner - 40 msごとに最大65の離散選択(no step または1脚のsafe footholdへのstep)とswing timeを出力 - convex MPCの上にreinforcement learningで訓練 - 構造的制約は「同時にswingできる脚は最大2本」のみ - inverse footstep model(IFM)をcontrollerのログからfitし、footholdをcommandに変換 - IFMのみ再fitすることで、frozenのCADENCEをOCS2のnonlinear MPC上で動作可能

4. どうやって有効だと検証した?

- シミュレーションで様々な地形(void率26%〜49%)と速度(0.1 m/s、0.2 m/s)で試験 - 成功率85.1%(5 seedの平均)、OCS2-Trotは67.8%、OCS2-Singleは65.5%、CADENCEのstatic walk ablationは39.6% - void率49%では72.9%成功、OCS2-Trotは43.0% - IFMのみ再fitし、20,000 step未満でfrozenのCADENCEをOCS2のnonlinear MPC上で動作させて検証

5. 議論はある?

- 学習されたpolicyはacyclic gaitを獲得しつつ、対角脚をペアにする傾向が観察された - gait scheduleやgait reward項なしでも実用的なgaitが創発 - 同時swing脚を最大2本に制限する構造的制約がgait形成に与える影響は要旨からは不明 - 実機実験やより多様な地形・速度での検証については要旨からは不明

6. 次に読むべき論文は?

- OCS2(nonlinear MPCフレームワーク) - OCS2-Trot、OCS2-Single(比較対象のcyclic gait controller) - convex model predictive controller(MPC) - inverse footstep model(IFM) - reinforcement learningによるstep planner関連研究(要旨では具体的な文献名は不明)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Owen Sullivan, Sourav Selvaraj, Mahdi Agheli

分類: cs.RO

原文アブストラクト

Model-based quadruped controllers usually step on a cyclic gait, which lifts the legs in a fixed order on a fixed period, wherever the safe footholds are. We present CADENCE, a learned step planner with a small action space. Every 40 ms, it picks one of at most 65 discrete choices: no step, or one leg's step to a safe foothold. It also predicts a swing time. We train CADENCE by reinforcement learning on top of a convex model predictive controller (MPC). Nothing prescribes a gait: there is no gait schedule, and the reward has no gait term, only a cost per step. The one structural constraint is that at most two legs may swing at once. The policy we analyzed developed an acyclic gait, with no fixed period or stepping order, yet it still paired diagonal legs. An inverse footstep model (IFM), fitted on a controller's logged steps, turns each foothold into a command. With only the IFM refitted, on fewer than 20,000 steps, CADENCE ran frozen on OCS2's nonlinear MPC. In simulated trials on a range of terrains (26% to 49% voids) and speeds (0.1 m/s and 0.2 m/s), it succeeded in 85.1% (mean of five seeds), against 67.8% for OCS2-Trot, 65.5% for OCS2-Single, and 39.6% in a static walk ablation of CADENCE. At 49% voids, it succeeded in 72.9%, against 43.0% for OCS2-Trot.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  4. 4SoftBank主導、Agile Robotsが5億ドル調達 NVIDIAと日立も参加資金調達
  5. 5パナソニックHD、「現場起点のPhysical AI」の研究開発加速を発表研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI