日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転/エンドツーエンド学習arXiv:2611.23719

不完全な人間の介入データから先読み型のエンドツーエンド自動運転を学習する展開後の改善手法

Improving While Deployed: Learning Proactive End-to-End Driving from Imperfect Human Takeover Data

シェア:XThreadsFacebookLINEはてブBluesky

展開済み自動運転モデルの不完全な人間介入ログを活用し、軌道候補の生成とスコアラー学習で先読み的な監督信号を作り、推論構造を変えずにモデルを改善する手法を提案した。

詳しい要約

1. どんなもの?

- 配備済みの end-to-end driving model を、実車の takeover data を用いて事後学習する枠組み - 走行中に得られる human takeover data を活用 - 不完全な人間介入を proactive な supervision に変換 - 推論アーキテクチャを変えずにモデルを更新

2. 先行研究と比べてどこがすごい?

- 従来の direct imitation learning では、遅すぎる介入や不要な介入をそのまま模倣し、late response の強化や適切な maneuver の抑制が起こりうる - 本研究は imperfect な takeover data をそのまま模倣せず、proactive supervision に変換する点が異なる - 閉-loop 評価で deployed model、direct imitation learning、trajectory post-optimization を上回ったと報告

3. 技術・手法の肝は?

- deployed model の plan を augment し、記録された human corrective maneuver を時間的に早めることで多様な trajectory candidates を生成 - scene-conditioned trajectory scorer を、expert demonstrations と takeover logs からの unpaired preference signals で学習 - scorer を用い、pre-takeover の training targets を高スコア候補に選択的に置換。通常走行場面では元の target を保持 - 得られた targets を driving model に distill し、推論アーキテクチャは変更しない

4. どうやって有効だと検証した?

- 実世界シナリオを 4D Gaussian splatting で再構成した closed-loop evaluations を実施 - 提案手法が overall success rate で最高を記録 - deployed model、direct imitation learning、trajectory post-optimization を上回った

5. 議論はある?

- human interventions が late または unnecessary になりうるという不完全性への対処が主題 - unpaired preference signals を用いる設計により、不完全な takeover logs から学習 - 既存 fleet logs を用いた配備済みモデルの効率的更新への実用的道筋を示す - 具体的な限界や失敗事例は要旨からは不明

6. 次に読むべき論文は?

- direct imitation learning - trajectory post-optimization - end-to-end driving model の配備後更新に関する研究 - 4D Gaussian splatting を用いた closed-loop evaluation 関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yangang Ren, Di Zeng, Jun Li, Zirui Li, Chengjiang Zhang, Xiaoqing Ye, Ji Tao, Chen Lv

分類: cs.RO

原文アブストラクト

Once deployed on vehicles, end-to-end driving models continuously encounter challenging scenarios, generating valuable human takeover data that capture both model outputs and human behaviors. However, human interventions are often imperfect, as drivers may intervene too late or unnecessarily. Consequently, direct imitation can reinforce late responses or discourage otherwise appropriate maneuvers. To address this challenge, we propose an offline post-training framework that transforms imperfect takeover data into proactive supervision. We first construct diverse trajectory candidates by augmenting the plans of the deployed model and shifting recorded human corrective maneuvers earlier in time. We then train a scene-conditioned trajectory scorer to rank these candidates using expert demonstrations and unpaired preference signals from takeover logs. Using this scorer, we selectively replace pre-takeover training targets with higher-scoring candidates while retaining the original targets in normal driving scenarios. Finally, we distill the resulting targets into the driving model without changing its inference architecture. In closed-loop evaluations using real-world scenarios reconstructed with 4D Gaussian splatting, our method achieves the highest overall success rate, outperforming the deployed model, direct imitation learning and trajectory post-optimization. These results highlight a practical path toward efficient updates of deployed driving models using existing fleet logs.

関連論文

  1. 1パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3日経クロステック、NVIDIA取締役会のファンCEO解任議論を報道 同社は同日、辞任を発表業界動向
  4. 4NVIDIA、ヒトの動きをロボットに適応する「SOMA Retargeter」を紹介研究・技術
  5. 5ティアフォーとTUM、Autowareでミュンヘン大型路線バスの自動運転開発を支援提携・買収

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI