日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

慣性オドメトリ/動作理解arXiv:2611.10137

人間とヒューマノイドの動作のための統一慣性エンコーダ

A Unified Inertial Encoder for Human and Humanoid Motion

シェア:XThreadsFacebookLINEはてブBluesky

人間とヒューマノイドの動作を共通の慣性入力空間で表現する統一エンコーダを提案し、人間動作データで学習したモデルを物理シミュレーションや実機学習なしでUnitree G1にゼロショット転移させ、速度推定と言語接地動作理解を実現した。

詳しい要約

1. どんなもの?

- 人間とヒューマノイドの運動を共通の inertial interface で扱う unified inertial encoder を提案する研究。 - kinematic IMU synthesis により、人間とヒューマノイドの対応する身体部位の IMU 信号を生成し、同一入力空間に写像する。 - この共通空間で velocity estimation と motion–text alignment を joint training する。 - 学習済みモデルは Unitree G1 に zero-shot 転移し、inertial odometry と language-grounded motion understanding を実現する。

2. 先行研究と比べてどこがすごい?

- 従来は robot recordings に基づく学習がロボットの運動レパートリーに制約され、human motion datasets の広いカバレッジを活かしにくかった。 - 本研究は body geometry・sensing・physical disturbances の差異を共通 inertial interface で吸収し、人間運動データの知識をヒューマノイドへ転移可能にした。 - 物理シミュレーション・実機学習軌道・fine-tuning なしの zero-shot 転移を実現した点が特徴。 - 評価した5データセットで最低の velocity error を達成し、実機 G1 で 0.099m/s を記録したと報告。

3. 技術・手法の肝は?

- kinematic IMU synthesis を用い、人間とヒューマノイドの対応身体部位の IMU 信号を生成して共有 inertial interface を構成。 - 人間運動と kinematically retargeted humanoid motion を joint training し、velocity estimation と motion–text alignment を同時学習。 - continuous-time encoding を採用し、sensor randomization と motion randomization で頑健性を付与。 - 共通入力空間内で学習することで、実機への zero-shot 転移を可能にする。

4. どうやって有効だと検証した?

- 評価した5データセットで velocity error を比較し、評価手法中最低を達成。 - 実機 Unitree G1 において 0.099m/s の velocity error を記録。 - motion-description retrieval が、人間の学習データにのみ存在した retargeted G1 motion categories にも拡張することを確認。 - 物理シミュレーション・実ロボット学習軌道・fine-tuning なしでの zero-shot 転移を検証。

5. 議論はある?

- 人間運動知識がヒューマノイドの inertial odometry と language-grounded motion understanding の汎化を支えることを示唆。 - 身体幾何・センシング・外乱の差異を共通 interface でどこまで吸収できるかの限界は要旨からは不明。 - 実機検証は Unitree G1 のみであり、他機種への一般性は要旨からは不明。 - 詳細な議論・限界・失敗事例は要旨からは不明。

6. 次に読むべき論文は?

- kinematic IMU synthesis および inertial odometry の関連研究。 - motion–text alignment / language-grounded motion understanding の関連研究。 - kinematically retargeted humanoid motion を用いた転移学習の関連研究。 - Unitree G1 を用いたヒューマノイド状態推定の関連研究。 - 要旨で参照・比較されている個別論文は明示されていないため、上記は同分野の関連手法・概念として挙げる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yutian Chen, Shibo Zhao, Rocky Duan, Karen Liu, Carmelo Sferrazza, Guanya Shi, Yuheng Qiu, Koushil Sreenath

分類: cs.RO

原文アブストラクト

Learning humanoid state estimation and language-grounded motion understanding from robot recordings ties training coverage to the robot's motion repertoire. Human motion datasets offer broader coverage, yet transferring this knowledge requires overcoming differences in body geometry, sensing, and physical disturbances. To enable this transfer, we propose a unified inertial encoder whose shared inertial interface uses kinematic IMU synthesis to represent human and humanoid motion at corresponding body sites. Within this common input space, joint training on human and kinematically retargeted humanoid motion combines velocity estimation and motion--text alignment with continuous-time encoding and sensor and motion randomization. The resulting model transfers zero-shot to a physical Unitree G1 without physics simulation, real-robot training trajectories, or fine-tuning, achieving the lowest velocity error among evaluated methods across five datasets, including 0.099m/s on real G1. Its motion-description retrieval also extends to retargeted G1 motion categories observed only in human training, demonstrating how human motion knowledge can support the generalization of humanoid inertial odometry and language-grounded motion understanding.

  1. 1パナソニックHDら、ロボット操作AI「T-Rex」を共同開発 12タスクで平均成功率65%研究・技術
  2. 2Hugging Face、ロボット学習基盤「LeRobot v0.7.0」を公開 対話操作と大規模データ学習に対応新製品・発表
  3. 3NVIDIA、Vera CPUのエージェント処理性能を公表 x86比で速度・電力効率を比較半導体・GPU
  4. 4Agility、SPAC合併でナスダック上場資金調達
  5. 5智元、清華大学などとCELを発表 96台のロボットで群体学習を検証研究・技術
PR本紙発行元 EmplifAI