日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ヒューマノイド制御arXiv:2611.20888

スタイルを駆動する:動作実演からの速度条件付き全身制御

Driving the Style: Velocity-Conditioned Whole-Body Control from Motion Demonstrations

シェア:XThreadsFacebookLINEはてブBluesky

全身追従報酬でヒューマノイド方策を訓練しつつ、actorへの入力は速度指令と観測のみに制限することで、参照軌道なしに実演の全身スタイルを再現する手法を提案。実機Unitree G1で全試行を成功させた。

詳しい要約

1. どんなもの?

- humanoid robot の whole-body control を、motion-capture の demonstrations から学習する手法 - 方策の actor を compact な locomotion commands と robot observations のみに制限し、whole-body tracking rewards で直接訓練する - 参照 motion は reward と privileged critic の監督にのみ使い、actor へ参照 joint trajectories を渡さない - 結果として、指令された velocity の下で demonstrated style の whole-body 動作を再現する policy を得る

2. 先行研究と比べてどこがすごい?

- adversarial imitation (AMP 等) は style 信号を与えるが hardware 転送が難しい - 従来の whole-body tracking は runtime に reference trajectory を必要とし、訓練データと異なる motion で失敗しうる - 提案法は actor に参照軌道を渡さず teacher distillation も不要で、velocity command のみで style を再現 - held-out slow walking で whole-body tracking は 2%、command-conditioned distillation は 56% 成功に対し、提案法は simulation で 98% 以上、Unitree G1 で全 trial 完遂 - 訓練済み motion では joint position error が whole-body tracking の 8% 以内、style coverage は AMP より高い

3. 技術・手法の肝は?

- whole-body tracking rewards を直接用いて humanoid policy を訓練 - actor の入力は compact な locomotion commands と robot observations に制限 - reference motion は reward と privileged critic の監督にのみ使用 - actor へ reference joint trajectories を供給せず、teacher distillation も行わない - demonstrated style を tracking reward 経由で policy に埋め込み、commanded velocities 下で whole-body style を再現

4. どうやって有効だと検証した?

- 単一の random-walk motion で訓練し、held-out motions の velocity profiles を指令 - simulation で少なくとも 98% の success - Unitree G1 実機で全 trial を完遂 - held-out slow walking で whole-body tracking は 2%、command-conditioned distillation は 56% 成功、両者とも実機で失敗 - 訓練済み motion で joint position error が whole-body tracking の 8% 以内 - style coverage が AMP より高く、AMP は safety crane なしで実機転倒

5. 議論はある?

- 提案法は held-out slow walking でも実機で全 trial 完遂したと読めるが、比較手法との差の要因分析は要旨からは不明 - style coverage の定義や評価指標の詳細は要旨からは不明 - 単一 random-walk motion のみでの訓練であり、他 motion への汎化範囲は要旨からは不明 - AMP が実機で転倒した条件や安全性評価の詳細は要旨からは不明

6. 次に読むべき論文は?

- whole-body tracking through reinforcement learning の代表的研究 - Adversarial Motion Priors (AMP) - command-conditioned distillation を用いた humanoid locomotion 研究 - motion-capture demonstrations を用いた humanoid の style 学習研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Murad Dawood, Oezge Drama Berkenkamp, Antonio Gonzales Marin, Nutan Chen

分類: cs.RO

原文アブストラクト

Achieving human-like behavior on humanoid robots has advanced rapidly by leveraging motion-capture demonstrations rather than hand-crafted cost functions. Adversarial imitation supplies a style signal that lets a policy fulfill a task while adhering to a desired style, but is difficult to transfer to hardware. Whole-body tracking through reinforcement learning instead deploys reliably and imitates demonstrations faithfully, but the resulting policies are conditioned on the future reference, so they require a reference trajectory at runtime and can fail when the motion differs from the training data. We train a humanoid policy directly with whole-body tracking rewards while restricting its actor to compact locomotion commands and robot observations. Reference motion supervises the reward and privileged critic, without supplying reference joint trajectories to the actor or requiring teacher distillation. The demonstrated style is thereby encoded in the policy through the tracking reward, so the robot reproduces the whole-body style under commanded velocities. Trained on a single random-walk motion and commanded with velocity profiles from held-out motions, our policy reaches at least 98\% success in simulation and completes every trial on the Unitree G1. On held-out slow walking, whole-body tracking drops to 2\% success and command-conditioned distillation to 56\%, and both fail on the real robot. On the trained motions, the joint position error of our policy stays within 8\% of whole-body tracking, and it has a higher style coverage than adversarial motion priors (AMP), which fell on the real robot without a safety crane.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2Google DeepMind、ロボット向けAIを発表新製品・発表
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  5. 5SoftBank主導、Agile Robotsが5億ドル調達 NVIDIAと日立も参加資金調達

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI