日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
自動運転arXiv:2608.24525

RoG-DAgger: ロールアウト誘導によるエンドツーエンド運転の事後学習

RoG-DAgger: Rollout-Guided Post-Training for End-to-End Driving

シェア:XThreadsFacebookLINEはてブBluesky

エンドツーエンド運転システムの訓練と推論の不一致を解消するため、ロールアウトを用いて安全上重要な状態での高品質な専門家デモを生成し、DAggerによる事後学習を行うフレームワークを提案した。

詳しい要約

1. どんなもの?

RoG-DAggerは、エンドツーエンド運転モデルのポストトレーニングフレームワークである。固定の専門家データによるオープンループ模倣学習で訓練されたモデルが、ポリシー誘発状態で累積誤差により安全上重要な失敗を起こす問題に対処する。短期的なキネマティックロールアウトを用いて、安全上重要な状態での高品質な専門家デモを構築し、Dataset Aggregation (DAgger)に基づくポストトレーニングを実現する。

2. 先行研究と比べてどこがすごい?

既存の運転用DAggerパイプラインは、専門家が限られた軌道・速度解空間に制約される、テイクオーバーのタイミングが早すぎる/遅すぎる、専門家の決定が学生に利用できない特権情報に依存する、という3つの課題を持つ。RoG-DAggerは、ロールアウトによる解空間の拡大、ロールアウトの可解性によるテイクオーバーのタイミング調整、専門家の視野を学生に合わせることで、これらの課題を解決する点が新しい。

3. 技術・手法の肝は?

RoG-DAggerは、短期的なキネマティックロールアウトを用いて、専門家の軌道・速度解空間を拡大し、候補プランをロールアウトで評価して予防的監督を構築する。また、ロールアウトの可解性を用いて、回復不能点の近くでテイクオーバーのタイミングを調整する。さらに、専門家の視野を学生の視野に合わせることで、学生互換の監督を提供する。

4. どうやって有効だと検証した?

RoG-DAggerは、分布内(長期的評価を含む)と分布外の評価で検証された。Bench2Driveでは、エンドツーエンドモデルSimLingoの運転スコアを5.3ポイント、成功率を6.2パーセントポイント向上させた。Longest6 v2では運転スコアを22から44に倍増させ、Fail2Driveでは分布外成功率を55%から66%に向上させた。

5. 議論はある?

要旨からは、議論の詳細は不明である。ただし、提案手法が特定のモデル(SimLingo)でのみ検証されている点や、ロールアウトの計算コスト、専門家の視野合わせの実装詳細などが議論の対象となる可能性がある。

6. 次に読むべき論文は?

要旨で参照されている関連手法として、Dataset Aggregation (DAgger)とその運転への応用、およびエンドツーエンド運転モデルSimLingoが挙げられる。また、閉ループベンチマーク(Bench2Drive、Longest6 v2、Fail2Drive)に関する論文も関連する。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Liangyu Zhong, Joachim Sicking, Fabian Hueger, Hanno Gottschalk

分類: cs.RO

原文アブストラクト

Recent end-to-end driving systems demonstrate strong performance on closed-loop benchmarks, yet are still predominantly trained on fixed expert-collected data using open-loop imitation learning. This training-inference mismatch leaves the policy vulnerable in policy-induced states, where accumulated errors can lead to safety-critical failures. A promising post-training approach to overcome this issue is Dataset Aggregation (DAgger), which gathers expert demonstrations in policy-induced states and subsequently fine-tunes the policy on the resulting aggregated dataset. Existing driving DAgger pipelines, however, face three challenges: i) the expert is restricted to a limited trajectory-and-speed solution space, ii) takeover may occur too early or too late relative to impending failures, and iii) privileged expert decisions may rely on information unavailable to the student. To address this, we introduce RoG-DAgger, a post-training framework that uses short-horizon kinematic rollouts to construct high-quality expert demonstrations in safety-critical states. Specifically, RoG-DAgger expands the expert's trajectory-and-speed solution space and evaluates candidate plans through rollout to construct preventive supervision. Moreover, it uses rollout solvability to time the takeover near the estimated point of no return. Lastly, it aligns the expert's field of view with that of the student to provide student-compatible supervision. Across in-distribution (including long-horizon) and out-of-distribution evaluations, RoG-DAgger improves the end-to-end model SimLingo by 5.3 driving-score points and 6.2 percentage points in success rate on Bench2Drive, doubles its driving score from 22 to 44 on Longest6 v2, and improves out-of-distribution success rate from 55\% to 66\% on Fail2Drive.

関連論文