日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
マニピュレーションarXiv:2610.29452

距離場駆動強化学習による反応的で堅牢な衝突回避

Distance Field Driven Reinforcement Learning for Reactive and Robust Collision Avoidance

シェア:XThreadsFacebookLINEはてブBluesky

ユークリッド距離場を観測空間に組み込んだ強化学習で、7自由度マニピュレータの衝突回避を学習し、シミュレーションから実機へのゼロショット転移と動的障害物へのオンライン回避を実現した。

詳しい要約

1. どんなもの?

- ロボットマニピュレータ向けの強化学習(RL)による衝突回避フレームワーク - Euclidean Distance Field (EDF)を観測空間に直接組み込む - 連続的な幾何情報をエージェントに与え、安定かつ反応的な回避行動を狙う - 7-DoF冗長マニピュレータで検証し、sim-to-realのzero-shot転移を実現

2. 先行研究と比べてどこがすごい?

- 従来のRL衝突回避はsim-to-realギャップや反応性確保が課題 - EDFを観測に用いることで連続的な幾何的手がかりを提供 - 複雑な報酬設計を簡素化しつつ、Artificial Potential Field (APF)誘導あり・なしの両方で有効な回避を達成 - ランダムな静的物体のみで学習しながら、未知の実環境や動的障害物へ汎化

3. 技術・手法の肝は?

- Euclidean Distance Field (EDF)を観測空間に直接統合 - EDFが持つ豊富な空間情報を活用し、簡潔な報酬定式化を実現 - Artificial Potential Field (APF)ガイダンスの有無両方に対応可能な設計 - 7-DoF冗長マニピュレータ上で動作するRLポリシーを学習

4. どうやって有効だと検証した?

- 7-DoF冗長マニピュレータを用いて検証 - シミュレーションから実機へのzero-shot転移を実証 - ランダム化された静的物体のみで学習したにもかかわらず、未見の実環境へ汎化 - 動的障害物に対するオンライン回避のロバスト性を確認

5. 議論はある?

- EDFベース表現がsim-to-realギャップの緩和に寄与する可能性を示唆 - 複雑かつ変化する環境での信頼性・リアルタイム衝突回避行動の実現可能性を議論 - 具体的な限界や失敗事例、計算コストなどの詳細は要旨からは不明

6. 次に読むべき論文は?

- Artificial Potential Field (APF) を用いた古典的衝突回避手法 - Euclidean Distance Field (EDF) を観測に用いる他のロボティクスRL研究 - sim-to-real転移に関するdomain randomizationやzero-shot転移の関連研究 - 動的障害物回避のためのreactive RLポリシーに関する研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Taiga Ikeshima, Sheila Sutjipto, Lan Wu, Francisco J. Naranjo-Campos, Taiki Ishigaki, Taisuke Kobayashi, Teresa A. Vidal-Calleja, Eiichi Yoshida

分類: cs.RO

原文アブストラクト

Robust and reactive collision avoidance remains a central challenge for deploying Reinforcement Learning (RL) policies on real robotic manipulators, particularly when transferring behaviours learned in simulation to the physical world. This paper presents an RL framework that integrates the Euclidean Distance Field (EDF) directly into the observation space, providing the agent with continuous geometric cues that support stable and responsive avoidance behaviours. By leveraging the rich spatial information encoded in the EDF, the method enables a streamlined reward formulation that achieves effective obstacle avoidance both with and without Artificial Potential Field guidance. The proposed approach is validated on a 7-DoF redundant manipulator, demonstrating zero-shot transfer from simulation to real hardware. Despite being trained exclusively with randomised static objects, the deployed policy generalizes to previously unseen real environments and exhibits robust online avoidance of dynamic obstacles. These results highlight the potential of EDF-based representations to mitigate the sim-to-real gap and support reliable and real-time collision-aware behaviour in complex and changing environments.

関連論文

PR本紙発行元 EmplifAI