日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
自動運転/経路予測arXiv:2610.31835

SAGE: 一時交通規制下の工事区間経路予測のための視覚言語・幾何ハイブリッドフレームワーク

SAGE: A hybrid vision-language and geometry framework for work-zone pathway prediction under temporary traffic control

シェア:XThreadsFacebookLINEはてブBluesky

工事区間の一時交通規制下で、視覚言語モデルの軌道を幾何候補の選好として用い、MUTCDに基づく制約で経路選択と制御適合を統合する枠組みを提案し、実データで経路誤差と制約違反を低減した。

詳しい要約

1. どんなもの?

- 一時的な交通規制(Temporary traffic control)下の work zone を自動運転車が通過するための経路予測フレームワーク SAGE(Semantic-to-Action Grounded Execution)の提案。 - read-decide-execute-check の4段階で、経路生成・経路選好・規制準拠の検証を分離して扱う。 - VLM(vision-language model)の出力軌道を、幾何学的候補群に対する選好として利用する点が中心。 - 実世界の ROADWork 検証エピソード 2,306 件で評価。

2. 先行研究と比べてどこがすごい?

- 幾何学的予測器は複数のもっともらしい経路を出せるが、一時規制と整合する1本の選択が困難という課題に対し、VLM 軌道を選好信号として使う。 - 幾何 ranker の誤差のうち selection regret が 53% を占めることを示し、選択段階の重要性を定量化。 - SAGE は ranker 比で平均・最終 displacement error を 8.3%・12.0% 低減、hard-constraint violations を 37% 削減。 - 4 種の generator-selector 組合せすべてで VLM 軌道の意見が改善に寄与。 - 他の適応済み driving VLM 4 種を displacement error と安全指標で上回る。

3. 技術・手法の肝は?

- 役割分離型 generator が幾何学的候補経路を構築し、rank fusion が各候補の幾何スコアと VLM 軌道との一致度を統合。 - MUTCD(Manual on Uniform Traffic Control Devices)に沿った supervision で SAGE-VLM を訓練し、通過判断・軌道の前に lane status と hazard side を述べさせる。 - 予測された hazard side を MUTCD 規定由来の image-space predicates に入力し、スコアと変位に制限をかけた最終介入を行う。 - 経路構築・選好・規制準拠チェックを共有候補空間で分離する設計。

4. どうやって有効だと検証した?

- 実世界の ROADWork validation episodes 2,306 件で評価。 - 候補には人間デモの 10 px 以内の経路が 87% のエピソードで含まれることを確認。 - ranker 比で平均・最終 displacement error と hard-constraint violations の削減を測定。 - 4 種の generator-selector 組合せで VLM 軌道意見の効果を検証。 - state-of-the-art VLM モジュールとの精度比較、および他の driving VLM 4 種との displacement error・安全指標比較を実施。

5. 議論はある?

- selection regret が幾何 ranker 誤差の 53% を占め、候補生成より選択がボトルネックであることを議論。 - 改善は主に far field で見られ、近距離への効果は限定的と示唆。 - SAGE は state-of-the-art VLM モジュールと同等精度で、より高速応答の VLM を用いる点を主張。 - 最終介入はスコアと変位に bounded であり、その設計上の限界や一般化可能性についての詳細は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で比較対象として挙げられる幾何学的 ranker / geometric predictor および state-of-the-art VLM モジュール、適応済み driving VLM 4 種。 - 基盤となる VLM(vision-language model)および MUTCD 準拠の supervision 設計。 - 関連データセットとして ROADWork。 - 具体的な論文名は要旨に明記されていないため、同分野の定番として work zone 経路予測・driving VLM 関連研究を参照されたい。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jiaxi Liu, Keshu Wu, Weizhe Tang, Bofeng Cao, Sikai Chen, Xiaopeng Li, Steven T. Parker, Bin Ran

分類: cs.CV, cs.RO

原文アブストラクト

Temporary traffic control redirects vehicles through work zones, requiring automated vehicles to connect an interpretation of the visible devices to a continuous passing path. Geometric predictors can provide several plausible paths, yet selecting the one consistent with the temporary control remains difficult. We propose SAGE (Semantic-to-Action Grounded Execution), a read-decide-execute-check framework that separates path construction, path preference, and control compliance within a shared candidate space. The central idea is to use a vision-language model's (VLM's) trajectory as a preference over intact geometric candidates. A role-decoupled generator constructs the candidates, and rank fusion combines each candidate's geometric score with its agreement with the VLM trajectory. Supervision structured around the Manual on Uniform Traffic Control Devices (MUTCD) trains SAGE-VLM to state the lane status and hazard side before its passage decision and trajectory. The predicted hazard side enters image-space predicates derived from MUTCD provisions, which support a final intervention bounded in score and displacement. On 2,306 real-world ROADWork validation episodes, the candidates include a path within 10 px of the human demonstration in 87% of episodes, yet selection regret accounts for 53% of the geometric ranker's error. SAGE reduces average and final displacement errors by 8.3% and 12.0% relative to the ranker, mostly in the far field, and hard-constraint violations by 37%. The trajectory opinion improves all four tested generator-selector combinations. SAGE is comparable to state-of-the-art VLM modules in accuracy, with a faster-responding VLM, and outperforms four other adapted driving VLMs in displacement error and safety measures. Project page: https://hhjj233.github.io/SAGE-page/.

PR本紙発行元 EmplifAI