日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
強化学習arXiv:2610.31891

考えるより動け:低精度近接センサによるサンプル効率の良い衝突回避

Move, don't think: sample-efficient collision avoidance with lossy proximity sensors

シェア:XThreadsFacebookLINEはてブBluesky

全身近接センサを帰納バイアスとして活用し、低解像度で情報が欠落したセンサの方が高解像度より衝突回避学習に有効であることを示した。接触の予測はむしろサンプル効率を下げることも発見した。

詳しい要約

1. どんなもの?

- 本研究は、data-driven robot が衝突回避を少ない demonstration で学習するための表現(representation)を探るもの。 - whole-body proximity sensors を inductive bias として活用し、reflexive collision-dodging behavior の学習を検討。 - humanoid robot 200体以上を、意図的に制約した sample・compute budget 下で simplified dodgeball の end-to-end 学習により評価。

2. 先行研究と比べてどこがすごい?

- 衝突回避の学習では破壊的な collision 例の大規模データ収集が問題となるが、本研究は少ない demonstration での学習を志向。 - lossy かつ低解像度の sensor が高解像度カバレッジより強い inductive bias になることを示した点が特徴。 - 直感に反し、接触の時期・部位を予測することが learning sample efficiency を低下させたと報告。 - 具体的な先行研究との比較は要旨からは不明。

3. 技術・手法の肝は?

- whole-body proximity sensors を inductive bias として用い、reflexive collision-dodging を学習。 - 8種類の candidate representation を reinforcement learning 環境で検討。 - 候補には latent compression、future contact anticipation、lossy corruption、privileged state estimation を含む。 - 制約された sample・compute budget 下で humanoid robot の end-to-end 学習を行う設計。

4. どうやって有効だと検証した?

- 8種類の candidate representation を reinforcement learning 環境で比較。 - 200体以上の humanoid robot を simplified dodgeball で end-to-end 学習させ、意図的に制約した sample・compute budget 下で評価。 - その結果、lossy で低解像度の sensor が高解像度カバレッジより強い bias となることを確認。 - 接触予測の追加が sample efficiency を下げることも確認。

5. 議論はある?

- lossy・低解像度 sensor が強い inductive bias になるという結果の一般性や機序については要旨からは不明。 - 接触の時期・部位の予測が sample efficiency を低下させる理由は要旨からは不明。 - 8候補の詳細な比較結果や、制約条件の具体的な設定は要旨からは不明。 - simplified dodgeball 以外のタスクへの外挿性は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない。 - 関連手法として reinforcement learning、latent compression、future contact anticipation、privileged state estimation、whole-body proximity sensing に関する文献が候補。 - 同分野の定番として sim-to-real transfer や tactile/proximity sensing を用いた collision avoidance の研究を次に読むべき。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Carson Kohlbrenner, Niraj Pudasaini, William Xie, Naren Sivagnanadasan, Nikolaus Correll, Alessandro Roncone

分類: cs.RO

原文アブストラクト

Data-driven robots must learn to avoid collisions with as few demonstrations as possible to avoid collecting large datasets of destructive collision examples. We explore whole-body proximity sensors as inductive biases for learning reflexive collision-dodging behavior and find that lossy sensors with low resolution were stronger biases than high-resolution coverage. We also found that, perhaps unintuitively, anticipating when and where contact happens on the body of a robot reduced its learning sample efficiency. We investigated eight candidate representations in a reinforcement learning environment, which included latent compression, future contact anticipation, lossy corruption, and privileged state estimation. The candidate representations were tested by training over 200 humanoid robots to play a simplified version of dodgeball end-to-end under an intentionally constrained sample and compute budget.

関連論文

PR本紙発行元 EmplifAI