日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
移動操作arXiv:2611.05113

物体認識型モーションプライアを基盤とする階層型ヒューマノイド移動操作

HLO-AMP: Hierarchical Loco-Manipulation from Object-Aware Motion Priors

シェア:XThreadsFacebookLINEはてブBluesky

操作対象をシーンに含めてモーションキャプチャ参照で低レベル制御器を学習し、その上に高レベル方策を重ねてヒューマノイドの移動操作を実現した研究。

詳しい要約

1. どんなもの?

- ヒューマノイドの loco-manipulation のための階層型フレームワーク HLO-AMP を提案 - 低レベル (LL) を object-aware な motion prior として学習し、その上に高レベル (HL) の task policy を載せる - Unitree G1 上の bimanual box pick-and-place に実装 - 同じ policy が物体の質量・寸法、初期/目標姿勢、運搬中の落下からの回復に汎化

2. 先行研究と比べてどこがすごい?

- 従来の階層型は task-agnostic な WBC を手動 reward shaping で学習し、機械的な動きになりがち - 従来 WBC は操作対象を scene に含めず、end-effector へのランダムな力外乱で物体動力学を近似 - この近似は腕や胴に分散する multi-contact wrench を再現できず、payload 限界付近でギャップが深刻化 - 提案は LL 自体を object-aware motion prior として学習し、物体を物理的に scene に含めて接触 wrench を源で吸収 - 人間らしい協調を MoCap 参照から継承しつつ、command-tracking WBC と同じ compact な task-space command interface を維持

3. 技術・手法の肝は?

- LL を retargeted MoCap 参照への motion imitation で単一 policy として学習 - 参照は下流タスクの主要 motion primitives を網羅し、操作物体を scene に物理的に存在させる - LL は command-tracking WBC と同じ compact な task-space command interface を公開 - HL は reference-free で LL の上に学習 - HL の action channel を LL 学習データの経験的 envelope に anchor し、prior を長 horizon 多段タスクへ汎化しつつ off-distribution なクエリを構造的に防止

4. どうやって有効だと検証した?

- Unitree G1 上の bimanual box pick-and-place で実装 - 同一の deployed policy が物体の質量・寸法、初期/目標姿勢に汎化することを確認 - 運搬中の意図的な落下から reactively に回復することを確認 - 定量的な比較実験の詳細は要旨からは不明

5. 議論はある?

- 従来の end-effector 力外乱による物体動力学近似の限界を議論 - payload 限界付近で分散 multi-contact wrench の再現が重要と指摘 - HL の action channel を LL データの envelope に anchor する設計で off-distribution を防ぐ点を議論 - 限界や失敗事例の詳細は要旨からは不明

6. 次に読むべき論文は?

- 比較対象として言及される command-tracking WBC 系の研究 - motion imitation / motion prior を用いた低レベル制御の研究 - 階層型 loco-manipulation の HL/LL 分離に関する研究 - Unitree G1 を用いた humanoid loco-manipulation の研究 - 要旨で特定の論文名は挙げられていないため、上記は関連手法の一般名

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jean-Pierre Sleiman, Bilal Hammoud, He Li, Jonathan Foster, Sylvain Bertrand, Jessica K. Hodgins, Farbod Farshidian

分類: cs.RO

原文アブストラクト

Hierarchical pipelines for humanoid loco-manipulation typically pair a task-agnostic whole-body controller (WBC) with a downstream task policy. Such WBCs are often trained through manual reward shaping, which yields visibly machine-like motions; more consequentially, they are trained without the manipulated object in the scene. Object dynamics are instead approximated through randomized end-effector force disturbances, a proxy that fails to reproduce the distributed multi-contact wrench a real payload applies across the arms and torso, with the gap becoming critical near the platform's payload limit. In this work, we train the low-level (LL) controller itself as an object-aware motion prior: a single policy trained via motion imitation on retargeted motion-capture (MoCap) references that span the core motion primitives of the downstream task, with the manipulated object physically present in the scene. This single stage inherits natural human-like coordination from the references and absorbs the realistic contact wrench at its source, while exposing the same compact task-space command interface used by command-tracking WBCs. A reference-free high-level (HL) policy is then trained on top, with its action channel anchored to the empirical envelope of the low-level training data so that it generalizes the priors to a long-horizon multi-stage task while structurally preventing queries that would push the low level off-distribution. We instantiate the framework on a Unitree G1 for bimanual box pick-and-place: the same deployed policy generalizes across object masses and dimensions, initial and goal poses, and reactively recovers from intentional drops mid-carry. Video: https://youtu.be/viR_ULnRDQQ.

関連論文

PR本紙発行元 EmplifAI