日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

自動運転/VLAarXiv:2611.24192

軌道条件付き未来予測で視覚言語運転を強化するTrajWAM

TrajWAM: Trajectory-Conditioned Future Learning for Vision-Language Driving

シェア:XThreadsFacebookLINEはてブBluesky

実行軌道を条件にBEV未来予測を補助学習させ、推論時は未来予測を省いて直接ウェイポイントを生成する視覚言語運転モデルを提案し、Bench2Driveで運転スコア91.53を達成した。

詳しい要約

1. どんなもの?

- 自動運転向けの World Action Model (WAM) である TrajWAM を提案 - 未来シーンの予測と行動計画を結びつける枠組み - ego-trajectory query が共有 planner 表現から DINOv3-aligned BEV の未来予測を条件づける - 推論時は補助的な未来予測分岐を使わず、waypoint を直接生成 - 学習時のみ補助タスクとして BEV 未来学習を活用

2. 先行研究と比べてどこがすごい?

- 各走行記録が「実行された ego trajectory」と「観測された未来」の対を持つ点に着目 - 事実的な未来再構成を学習信号として利用 - 実行軌跡に加え、ラベルなしの perturbed trajectory 下での one-sided feature separation を導入 - schedule-matched な planning-only fine-tuning baseline に対し - Driving Score で +5.31 ポイント - 成功ルート数で +8 ルート - 全 220 の Bench2Drive routes で評価

3. 技術・手法の肝は?

- ego-trajectory query が共有 planner 表現を条件づけ、DINOv3-aligned BEV の未来予測を生成 - 学習目的は二つ - 実行軌跡下での事実的再構成 (factual reconstruction) - ラベルなし perturbed trajectory 下での one-sided feature separation - これらの目的で共有 planner を訓練し、driving waypoint を生成させる - 推論時は補助的な未来予測分岐をバイパスし、waypoint を直接生成

4. どうやって有効だと検証した?

- Bench2Drive の全 220 routes で評価 - 結果 - Driving Score 91.53 - Success Rate 75.45% - schedule-matched な planning-only fine-tuning baseline と比較し有効性を確認

5. 議論はある?

- 要旨からは不明 - 失敗ケースの分析や限界、計算コスト、perturbed trajectory の設計詳細は記述なし

6. 次に読むべき論文は?

- 要旨で明示的に参照/比較されている研究 - planning-only fine-tuning baseline - 関連手法として挙げられている要素 - World Action Models (WAMs) - DINOv3 - Bench2Drive - 同分野の定番として - BEV-based planning - vision-language driving 関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xuerui Fang, Gulimila Kezierbieke, Chen Wangxing, Hui Li

分類: cs.CV, cs.RO

原文アブストラクト

World Action Models (WAMs) connect future scene prediction with action planning for autonomous driving. Each driving record pairs an executed ego trajectory with its observed future, providing a factual outcome for learning this connection. We present TrajWAM, a trajectory-conditioned WAM that improves vision-language driving through auxiliary bird's-eye-view (BEV) future learning. An ego-trajectory query conditions DINOv3-aligned BEV predictions from shared planner representations. Training combines factual reconstruction under the executed trajectory with one-sided feature separation under an unlabeled perturbed trajectory. Together, these objectives train the shared planner to generate driving waypoints. Native inference directly generates waypoints and bypasses the auxiliary future-prediction branch. On all 220 Bench2Drive routes, TrajWAM achieves 91.53 Driving Score and 75.45% Success Rate, exceeding a schedule-matched planning-only fine-tuning baseline by 5.31 Driving Score points and eight successful routes.

関連論文

  1. 1パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3日経クロステック、NVIDIA取締役会のファンCEO解任議論を報道 同社は同日、辞任を発表業界動向
  4. 4NVIDIA、ヒトの動きをロボットに適応する「SOMA Retargeter」を紹介研究・技術
  5. 5ティアフォーとTUM、Autowareでミュンヘン大型路線バスの自動運転開発を支援提携・買収

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI