日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
自動運転/駐車arXiv:2609.19894

量子化行動表現を用いたオフライン強化学習による信頼性の高い駐車ポリシーの学習

Learning Reliable Parking Policies via Offline Reinforcement Learning with Quantized Action Representations

シェア:XThreadsFacebookLINEはてブBluesky

LiDAR特徴を目標姿勢に適応させ、ウェイポイント列を離散トークンに量子化して保守的Q学習を行うオフライン強化学習により、対話を考慮した自動駐車を実現し、CARLAで最高の成功率と未見スロットへの転移を示した。

詳しい要約

1. どんなもの?

- 都市環境での自動運転車両のための駐車タスクを対象とした研究。 - オフライン強化学習(offline reinforcement learning)を用いて、信頼性の高い駐車ポリシーを学習するフレームワークを開発。 - ウェイポイントレベルのポリシーを生成し、対話的な不確実性に対処。 - 専用の駐車データセットを構築し、非対話シナリオと対話シナリオの両方をカバー。 - 高忠実度シミュレータCARLAでの閉ループ実験で評価。

2. 先行研究と比べてどこがすごい?

- 従来の駐車手法と比較して、オフライン強化学習と量子化された行動表現を組み合わせる点が新しい。 - 対話的不確実性を考慮した駐車ポリシーを学習できる点が優れている。 - ベースラインの中で最高の駐車成功率を達成し、未見の駐車スロットへの転移も信頼性が高い。 - 具体的な先行研究との比較は要旨からは不明。

3. 技術・手法の肝は?

- 階層的なエキスパートロールアウトと回転ウェイポイント拡張を用いて駐車データセットを構築。 - LiDARベースの障害物特徴を特徴-wise linear modulation (FiLM) で目標姿勢に適応させ、コンパクトな状態表現を生成。 - 状態条件付きトークナイザーで連続ウェイポイント列を離散行動トークンに量子化。 - 保守的Q学習(conservative Q-learning)を実行し、サポートの少ない行動に対する価値過大評価を抑制。

4. どうやって有効だと検証した?

- 高忠実度CARLAシミュレータで広範な閉ループ実験を実施。 - 提案フレームワークが全ベースライン中で最高の駐車成功率を達成。 - 未見の駐車スロットへの転移が信頼性高く行われることを確認。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として、offline reinforcement learning、conservative Q-learning、feature-wise linear modulation (FiLM)、CARLAシミュレータを用いた自動運転研究が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zewei Yang, Zengqi Peng, Jun Ma

分類: cs.RO

原文アブストラクト

Parking is a routine yet safety-critical task for autonomous vehicles operating in urban environments. However, cluttered and weakly structured parking spaces, compounded by the interactive uncertainty from surrounding vehicles, hinder reliable maneuver generation. To address these challenges, we develop a waypoint-level offline reinforcement learning framework for interaction-aware autonomous parking. Specifically, a dedicated parking dataset is constructed from hierarchical expert rollouts with rotational waypoint augmentation, covering both non-interactive scenarios and interactive ones. The policy is then conditioned on a compact state representation, in which LiDAR-based obstacle features are adapted to the target pose via feature-wise linear modulation. A state-conditioned tokenizer further quantizes continuous waypoint sequences into discrete action tokens, over which conservative Q-learning is performed to suppress value overestimation on poorly supported actions. Extensive closed-loop experiments are conducted in the high-fidelity CARLA simulator. The proposed framework attains the highest parking success rate among all baselines and transfers reliably to unseen parking slots.

関連論文

PR本紙発行元 EmplifAI