日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
歩行arXiv:2609.07096

RoboDreamer: 予測状態空間モデルによる先読み型ヒューマノイド歩行

RoboDreamer: Anticipatory Humanoid Locomotion with Predictive State-Space Models

シェア:XThreadsFacebookLINEはてブBluesky

観測マスキングと蒸留を用いた2段階教師-学生フレームワークで、不完全なセンシング下でも安定したヒューマノイド歩行を実現する。

詳しい要約

1. どんなもの?

RoboDreamerは、不完全なセンシング下でも安定し、時間的文脈を活用して一貫した動作を実現する人型ロコモーションのための制御ポリシーを学習する、2段階のteacher-studentフレームワークを提案する。

2. 先行研究と比べてどこがすごい?

先行研究と比べて、観測のランダムな連続時間マスキングとnext-observation consistencyを組み合わせた点、および推論時に同じマスキングインターフェースを再利用して暗黙の閉ループ行動洗練とオプションのマルチステップ行動チャンキングを実現する点が新しい。

3. 技術・手法の肝は?

手法の肝は、まずクリーンな観測でteacherを訓練し、その後マスクされた最近の観測下でstudentを蒸留することにより、履歴から現在の欠落情報を推論することを促す点。時間的バックボーンとしてMambaを使用し、推論時にはマスキングインターフェースを再利用する。

4. どうやって有効だと検証した?

IsaacLab、MuJoCo、およびUnitree G1での実験により、観測マスキング下での堅牢な動作追跡と実世界展開の成功を実証した。また、マッチしたアブレーションにより、マスキング/蒸留が大きな性能向上をもたらし、Mambaがリアルタイム遅延で追加の追跡改善に寄与することを示した。

5. 議論はある?

要旨からは、マスキング/蒸留の具体的なメカニズムやMambaの利点の詳細、他のアーキテクチャとの比較、限界などについての議論は不明。

6. 次に読むべき論文は?

要旨で参照されている関連手法として、teacher-student framework、next-observation prediction、temporal masking、Mamba、およびロコモーション制御のためのstate-space modelsが挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhe Li, Yangyang Wei, Xichen Yuan, Zhenzhe Zhang, Weihao Yuan, Shanghang Zhang, Jianfei Yang

分類: cs.RO

原文アブストラクト

Humanoid locomotion requires control policies that remain stable under imperfect sensing while exploiting temporal context for consistent motion. We present RoboDreamer, a two-stage teacher--student framework that combines next-observation consistency with randomized continuous temporal masking. A teacher is first trained on clean observations, and a student is then distilled under masked recent observations, encouraging the policy to infer missing current information from history. At inference, the same masking interface is reused for implicit closed-loop action refinement and optional multi-step action chunking. Mamba is used as the temporal backbone, while matched ablations show that masking/distillation provides a substantial part of the gain and Mamba contributes additional tracking improvements with real-time latency. Experiments in IsaacLab, MuJoCo, and on a Unitree G1 demonstrate robust motion tracking under observation masking and successful real-world deployment.

関連論文