日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
自動運転arXiv:2610.11382

PlanWAM: 計画に最適化された未来表現によるエンドツーエンド自動運転

PlanWAM: Planning-Shaped Future Representations for End-to-End Autonomous Driving

シェア:XThreadsFacebookLINEはてブBluesky

計画タスクに有用な未来状態表現を学習し、それを予測して先読み計画を行う自動運転の世界モデル手法を提案。NAVSIMやHUGSIMで高性能を示す。

詳しい要約

1. どんなもの?

- 提案手法: PlanWAM (Planning-Shaped World Action Model) - 目的: end-to-end autonomous driving における将来予測を計画に有効活用 - 特徴: 計画タスクが将来状態表現を形成し、計画に有用な情報を保持 - 構成: latent world model が履歴から計画形状の将来潜在表現を予測し計画に使用 - 評価: NAVSIM-v1/v2 で 93.8 PDMS / 90.9 EPDMS、HUGSIM で 38.7 HD-Score (zero-shot)

2. 先行研究と比べてどこがすごい?

- 従来: 将来予測の方法と利用法を研究するが、計画に最も有用な将来表現を問わない - 提案: 計画タスクが将来状態表現を形成するという新視点 - 利点: 計画に必要な情報を保持した将来潜在表現を予測し、先見的な計画を可能に - 性能: 開ループ・閉ループ評価で最先端の計画性能を達成

3. 技術・手法の肝は?

- Temporal Register Pyramid: 多フレーム履歴を recency-aware に圧縮し、将来推論と計画に指向したコンパクトな履歴表現を学習 - privileged future posterior branch: 正解将来フレームを観測し、軌道計画目的で将来潜在表現を形成し planning-shaped future latent representation を得る - Hindsight-to-Foresight Distillation: 履歴のみに依存する prior branch を訓練し、この将来潜在表現を予測 - 予測された将来潜在表現を計画コンテキストとして軌道生成・選択を誘導

4. どうやって有効だと検証した?

- データセット: NAVSIM-v1/v2 navtest, closed-loop HUGSIM - 指標: PDMS, EPDMS, HD-Score - 結果: 93.8 PDMS / 90.9 EPDMS (NAVSIM-v1/v2), 38.7 HD-Score (HUGSIM, zero-shot) - 比較: 開ループ・閉ループ評価で leading planning performance を実証 - 追加実験: planning-shaped future representations が有効で展開可能な先見性を提供することを示す

5. 議論はある?

- 主張: planning-shaped future representations は world-action models にとって効果的で展開可能な先見性の形式 - 限界や課題: 要旨からは不明 - 今後の方向性: 要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究: なし - 関連手法: world models in end-to-end autonomous driving, latent world model, trajectory planning - 同分野の定番: end-to-end autonomous driving, world models, trajectory planning

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jinchang Xu, Hongda Yu, Fengwei Dong, Wenhui Huang, Xi Wei, Yongzhi Liu, Sunan Zhang, Jirao Wang, Chen Lv, Bingbing Li, Guodong Yin, Weichao Zhuang

分類: cs.RO, cs.LG

原文アブストラクト

World models in end-to-end autonomous driving predict future scene evolution to provide foresight for trajectory planning. Existing methods mainly study how to predict the future and how to use it, but less often ask which future representation is actually most useful for planning. To this end, we propose PlanWAM, a Planning-Shaped World Action Model. The key idea is to let the planning task shape the future-state representation, so that it retains the information most useful for planning. A latent world model then predicts this planning-shaped future latent representation from historical observations and uses it for planning, enabling foresighted planning. Specifically, we first use a Temporal Register Pyramid to compress multi-frame historical information in a recency-aware manner, learning a compact history representation oriented toward future reasoning and planning. We then introduce a privileged future posterior branch that observes ground-truth future frames, and shape its future latent representation with trajectory-planning objectives to obtain a planning-shaped future latent representation. Hindsight-to-Foresight Distillation trains a prior branch that depends only on history to predict this future latent representation. The predicted future latent representation serves as planning context and guides trajectory generation and selection. PlanWAM achieves 93.8 PDMS / 90.9 EPDMS on NAVSIM-v1/v2 navtest and reaches 38.7 HD-Score on closed-loop HUGSIM in a zero-shot setting, demonstrating leading planning performance across both open-loop and closed-loop evaluations. Extensive experiments further demonstrate that planning-shaped future representations provide an effective and deployable form of foresight for world-action models.

関連論文

PR本紙発行元 EmplifAI