日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
ロコマニピュレーションarXiv:2609.13779

車輪脚ロコマニピュレーションのためのハイブリッド力覚センサレス推定を用いた力認識強化学習

Force-Aware Reinforcement Learning with Hybrid Sensorless Force Estimation for Wheeled-Legged Loco-Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

エンドエフェクタの力覚センサを使わずに、運動量観測・接触制約レンチ投影・時間的残差学習を組み合わせて力を推定し、それを観測に組み込んだ全身強化学習で車輪脚ロボットの力制御を実現した。

詳しい要約

1. どんなもの?

本論文は、車輪脚型ロボットのloco-manipulationにおいて、end-effectorの力/トルクセンサを使わずに力制御を実現するforce-aware強化学習手法を提案する。hybrid sensorless force estimationによりend-effector力を推定し、それをポリシーの明示的な観測として与えることで、力に基づく接触行動を可能にする。mode-conditioned whole-body policyとaxis-wise force/position selectorを統合し、自由空間運動、純粋な力調整、hybrid force/position controlを単一コントローラで実現する。

2. 先行研究と比べてどこがすごい?

従来の力制御loco-manipulationはend-effectorの力/トルクセンサを必要とすることが多く、浮遊ベース動力学や支持接触の変化下での力推定が課題であった。本研究は、センサレスで力推定を行い、それを強化学習ポリシーの観測として組み込む点で先行研究と異なる。また、mode-conditioned policyとaxis-wise selectorにより、複数の制御モードを単一コントローラで切り替え可能にした点が優位性として示唆される。

3. 技術・手法の肝は?

提案手法の肝は、hybrid sensorless force estimationにある。これはgeneralized momentum observation、contact-constrained wrench projection、temporal residual learningを組み合わせる。model-based componentsが全身外乱の物理的に構造化された部分を抽出し、residual networkが残りの運動依存バイアスを補償する。推定力はmode-conditioned whole-body policyに統合され、axis-wise force/position selectorにより自由空間運動、純粋な力調整、hybrid force/position controlを単一コントローラで実現する。

4. どうやって有効だと検証した?

シミュレーション結果により、センサレス力推定と力制御性能の向上が示された。ハードウェア実験では、実機の車輪脚型プラットフォーム上で定量的なvalve-rotationおよびhybrid wiping評価、さらにforce-guided door openingとzero-force human-guided motionを通じて提案コントローラが検証された。

5. 議論はある?

要旨からは、提案手法の限界や議論の詳細は不明である。ただし、浮遊ベース動力学や支持接触の変化下での力推定の難しさが背景として述べられており、センサレス力推定の精度や汎化性、実機での安全性などが議論の対象になり得る。

6. 次に読むべき論文は?

要旨で参照/比較されている研究は明示されていない。関連手法として、generalized momentum observer、contact-constrained wrench projection、temporal residual learning、mode-conditioned whole-body policy、hybrid force/position controlなどが挙げられる。同分野の定番としては、whole-body controlやloco-manipulationに関する強化学習研究が次に読むべき候補となる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xuanqi Zeng, Jiaming Wang, Tianlin Zhang, Lingwei Zhang, Botian Xu, Weipeng Xia, Zhongyu Li, Yun-Hui Liu

分類: cs.RO

原文アブストラクト

Force-controlled loco-manipulation requires a whole-body policy to coordinate locomotion and arm motion while regulating end-effector interaction forces. This is challenging under floating-base dynamics and changing support contacts, particularly when end-effector force/torque sensing is unavailable for control. This paper presents a force-aware reinforcement learning approach with hybrid sensorless force estimation for wheeled-legged loco-manipulation. The proposed method provides a structured estimate of the end-effector force as an explicit policy observation, enabling force-guided contact behavior without using an end-effector force/torque sensor for control. The force estimate is obtained by combining generalized momentum observation, contact-constrained wrench projection, and temporal residual learning: the model-based components extract the physically structured part of the whole-body disturbance, while the residual network compensates the remaining motion-dependent bias. The estimated force is integrated into a mode-conditioned whole-body policy with an axis-wise force/position selector, allowing free-space motion, pure force regulation, and hybrid force/position control within one controller. Simulation results demonstrate improved sensorless force estimation and force-control performance. Hardware experiments further validate the proposed controller through quantitative valve-rotation and hybrid wiping evaluations, together with force-guided door opening and zero-force human-guided motion on a real wheeled-legged platform.

関連論文