日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
自動運転arXiv:2611.05448

言語ワールドモデルによる先見性を備えた安全な言語誘導自動運転

Jev with Foresight: Safe Language-Guided Autonomous Driving via a Language World Model

シェア:XThreadsFacebookLINEはてブBluesky

言語指示に従う自動運転のため、候補行動ごとに周辺車両の将来2秒の動きを予測する言語ワールドモデルを組み合わせ、衝突率を大幅に低減した。

詳しい要約

1. どんなもの?

- 言語指示に従う自動運転エージェント **Jev-AD** の提案 - 大規模言語モデル(LLM)が生成テキストで推論する代わりに、確率的に答える typed decision model **Jev** と組み合わせる - **language world model** が各候補行動について周辺車両の今後2秒の動きを予測 - 予測をコードで foreseen consequences に変換し、Jev が座標から推測せず比較する枠組み - 対象は高速道路の合流シーンと実世界の NGSIM リプレイ

2. 先行研究と比べてどこがすごい?

- 従来の LLM 運転エージェントは生成テキストで数秒かけて推論し、各行動の結果をシーンから暗黙に推測していた - 本研究は生成テキストではなく確率的な typed decision model を用い、行動の結果を world model の予測から明示的に得る点が異なる - 同一の decision model でも foresight により衝突率が大きく低下(26.0%→2.4%、48.2%→2.8%)したと報告 - 具体的な先行研究名との比較は要旨からは不明

3. 技術・手法の肝は?

- **Jev**: 生成テキストではなく、事前定義された質問に確率で答える typed decision model - **language world model**: 各候補行動に対し周辺車両の今後2秒の動きを予測 - 予測をコードで foreseen consequences に変換し、Jev が候補行動間で比較 - 行動の結果を座標から暗黙推論せず、明示的な予測として扱う設計が肝 - 判断時間は 0.25 秒/決定と報告

4. どうやって有効だと検証した?

- シミュレーション高速合流 500 car-episodes で評価 - foresight により同一 decision model の衝突率が 26.0%→2.4% - free-form command 試行の 93% で乗客意図を達成 - 実世界 NGSIM の 500 リプレイ episodes で評価 - 衝突率 48.2%→2.8% - この交通から学習した world model が危険行動の 93% を予見

5. 議論はある?

- 判断時間 0.25 秒/決定であり、リアルタイム性に関する議論の余地は要旨からは不明 - 評価はシミュレーション合流と NGSIM リプレイに限定され、実車での検証は要旨からは不明 - world model の予測誤差や未知シーンへの汎化については要旨からは不明 - 危険行動の予見率 93% の残り 7% の扱いは要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている個別研究は明示されていない - 関連手法として **NGSIM** データセットを用いた運転行動研究 - **language world model** を用いた予測・計画研究 - LLM を運転エージェント化する研究(生成テキスト推論型) - typed decision model / 確率的質問応答型の意思決定モデルに関する研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yansong Qu, Jiancong Chen, Samuel Labi

分類: cs.RO, cs.AI

原文アブストラクト

Large language models understand passengers' driving commands, but as driving agents they reason in generated text for seconds and must infer each action's consequences implicitly from the scene. We present Jev-AD, which pairs Jev, a typed decision model that answers predefined questions with probabilities, not generated text, with a language world model that predicts for every candidate action how nearby vehicles move over the next two seconds. Code turns these predictions into foreseen consequences, which Jev compares instead of inferring them from coordinates. In simulated highway merging (500 car-episodes), this foresight lowers the same decision model's collision rate from 26.0% to 2.4% at 0.25 seconds per decision, and Jev-AD achieves the passenger's intent in 93% of free-form command trials. In 500 replayed real-world NGSIM episodes, foresight lowers the collision rate from 48.2% to 2.8%, and the world model, learned from this traffic, foresees 93% of dangerous actions. Project page: https://ys-qu.github.io/jev-ad-website.

関連論文

PR本紙発行元 EmplifAI