日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
sim2realarXiv:2610.34126

HumanoidNDM:ヒューマノイド神経力学モデルによる動作追従の訓練-実環境ギャップの解消

HumanoidNDM: Closing the Training-Deployment Gap of Motion Tracking via Humanoid Neural Dynamics Model

シェア:XThreadsFacebookLINEはてブBluesky

実環境で学習した神経力学モデルを用い、モーションキャプチャ不要でヒューマノイドの動作追従ポリシーをオンライン微調整する枠組みを提案し、Unitree G1で外乱への適応を実証した。

詳しい要約

1. どんなもの?

- ヒューマノイドロボットのmotion trackingにおけるtraining-deployment gapを埋めるためのオンラインfine-tuningフレームワーク。 - 実世界で学習したneural dynamics modelによって駆動される。 - データ収集、モデル学習、policy fine-tuningの3段階から構成される。 - Unitree G1ロボットで物理検証されている。

2. 先行研究と比べてどこがすごい?

- 従来のmotion trackingは実展開時に物理的disturbanceや不正確なsimulation modelingによるdynamics gapに直面する。 - 実世界データでpolicyをfine-tuneすることが頑健な展開への重要な最後の課題と位置づける。 - 著者らは、ヒューマノイドtracking policyのための初のオンラインかつMoCap不要のfine-tuningフレームワークと主張する。 - 具体的な先行研究名との比較は要旨からは不明。

3. 技術・手法の肝は?

- データ収集段階で、低周波reference perturbationとadaptive intensity mechanismを導入し、展開可能性と探索効率を両立。 - モデル学習段階で、differentiable forward kinematicsを組み込み、Euclidean空間で履歴ベースのproprioceptive neural dynamics modelを学習。 - これにより高コストなmotion capture systemへの依存を排除。 - policy fine-tuning段階で、モデル勾配を逆伝播してpolicyを直接fine-tuneし、高いデータ効率を実現。

4. どうやって有効だと検証した?

- Unitree G1ロボット上での物理検証を実施。 - 様々なperturbationに対して迅速な実世界適応が可能であることを示した。 - 定量的な評価指標や比較実験の詳細は要旨からは不明。

5. 議論はある?

- 実世界データによるfine-tuningが頑健な展開の鍵であるという動機を提示。 - MoCap不要でオンラインfine-tuningを実現する点を利点として主張。 - 限界や失敗事例、計算コストなどの議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている具体的な先行研究は明示されていない。 - 関連手法として、motion tracking、neural dynamics model、differentiable forward kinematics、sim-to-real transfer、online fine-tuningに関する文献が次に読む候補となる。 - 具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Chao Chen, Zhenrong Wang, Jilong Wang, Yusen Feng, Jiangran Lyu, Li Yi, He Wang

分類: cs.RO, cs.AI, cs.LG

原文アブストラクト

Humanoid robots have recently achieved remarkable success in motion tracking. However, during real-world deployment, robots inevitably encounter dynamics gaps arising from either extra physical disturbances or inaccurate simulation modeling, resulting in a significant training-deployment gap. Therefore, effectively leveraging real-world data to fine-tune policies represents the crucial last mile for robust deployment. To bridge this gap, we propose HumanoidNDM, an online fine-tuning framework for humanoid motion tracking driven by a real-world-trained neural dynamics model. First, in the data collection stage, we introduce a low-frequency reference perturbation method with an adaptive intensity mechanism, balancing deployment feasibility and exploration efficiency. Second, for the model training stage, we train a robust history-based, proprioceptive neural dynamics model in Euclidean space by incorporating differentiable forward kinematics, eliminating the reliance on costly motion capture systems. Finally, in the policy fine-tuning stage, we directly fine-tune the policy via backpropagated model gradients, achieving high data efficiency. Through physical validation on the Unitree G1 robot, we demonstrate that HumanoidNDM enables rapid real-world adaptation to various perturbations, representing the first online, MoCap-free fine-tuning framework for humanoid tracking policies.

関連論文

PR本紙発行元 EmplifAI