AR-WAM:自動運転のための効率的ストリーミング型ワールドアクションモデリング
AR-WAM: efficient streaming world-action modeling for autonomous driving
因果的ビデオバックボーンで履歴計算を再利用し、単一パスで未来特徴を生成して軌道を条件付けする効率的な自動運転ワールドアクションモデルを提案。NAVSIM-v1で強力なベースラインを上回る性能を達成。
著者: Baiting Luo, Shatadal Mishra, Ahmadreza Moradipari, Nejib Ammar
分類: cs.CV, cs.AI, cs.RO
原文アブストラクト
Autonomous driving requires anticipating how traffic will evolve while responding quickly to new observations. Video foundation models offer the first ability, but repeated history encoding and iterative video generation make them costly to use for driving. We present AR-WAM, an efficient streaming world-action model that combines autoregressive temporal modeling with single-pass future conditioning. Because its video backbone is causal, AR-WAM updates its visual context incrementally, reusing past computation and conditioning future prediction on observed motion. We further hypothesize that future features computed from recent observations can improve generalization in dynamic traffic without iterative video generation. AR-WAM therefore obtains these features in one forward pass and uses them to condition trajectory generation, and reinforcement learning then improves the policy through direct optimization of driving rewards. With a single front camera, AR-WAM achieves 91.5 PDMS after supervised training and 94.0 after reinforcement learning on NAVSIM-v1, outperforming the compared strong end-to-end world-action models. In a dynamic setting of continuous driving, supervised AR-WAM keeps its visual history across decisions and outperforms strong world-action baselines.
関連論文
- 現実的な世界反応を実現する閉ループ対話型ワールドモデルによる自動運転自動運転/ワールドモデル
- 負例を活用した統合ワールドアクションモデルによるエンドツーエンド自動運転の安全強化自動運転/ワールドモデル
- 関係性に基づく潜在ワールドモデルによる自動運転自動運転/ワールドモデル
- インフラ中心のワールドモデル:路側知覚における時間的深さと空間的広がりの橋渡し自動運転/ワールドモデル
- 車両ダイナミクスを組み込んだ自動運転向けワールドモデル自動運転/ワールドモデル
- Imagine-2-Drive: マルチモーダル拡散ポリシーによる高忠実度ワールドモデル活用自動運転/ワールドモデル
