終了条件で形作る強化学習による参照データ不要のヒューマノイド・スケートボード
Reference-Free Humanoid Skateboarding via Termination-Shaped Reinforcement Learning
人間のデモやシステム同定なしに、モデルフリー強化学習と制約的な終了条件の組み合わせでK1ヒューマノイドにスケートボード走行を学習させる手法を提案した。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Ganeshvar Soenessardien, Michael Przystupa, Kevin Sebastian Luck
分類: cs.RO, cs.LG
原文アブストラクト
Humanoid locomotion research has advanced rapidly on walking and running, but \emph {object-mediated} locomotion, in which a robot must coordinate its body with a passive external object, remains difficult. One challenging task is skateboarding, which requires simultaneous interaction with the ground and a passive but movable platform to achieve forward motion. Current methods for tackling skateboarding with humanoid robots either require human demonstrations or utilise analytic steering models that require system identification. In this paper, we introduce a deep reinforcement learning framework that does not rely on prior data such as demonstrations and enables robots such as the K1 humanoid to learn to skateboard using model-free learning. The method combines task rewards with exploit-blocking terminations. We introduce a number of constraints restricting behaviours such as losing the planted board foot, standing with both feet on the board, excessive twisting, separation from the board, and unstable board motion. Their changing prevalence during training produces an implicit progression from stance control towards sustained robot--board locomotion.
関連論文
- 人間のようにサッカーする:潜在運動事前分布による多様で俊敏なヒューマノイドサッカーヒューマノイド/強化学習
- ヒューマノイドドッジボール:高速動的障害物回避動作の学習ヒューマノイド/強化学習
- HoloBoxing:単一GPU7分で学ぶヒューマノイドボクシングの簡易レシピヒューマノイド/強化学習
- ヒューマノイドロボットのための視覚駆動型リアクティブサッカースキルの学習ヒューマノイド/強化学習
- PACE: 物理拡張による協調的エンドツーエンド強化学習で多様なヒューマノイド卓球を実現ヒューマノイド/強化学習
