日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2611.19287

VLN-Flash:視覚言語ナビゲーションのための並列行動デコードと適応実行

VLN-Flash: Parallel Action Decoding with Adaptive Execution for Vision-and-Language Navigation

シェア:XThreadsFacebookLINEはてブBluesky

視覚言語ナビゲーション方策の行動系列を1回の順伝播で並列に評価し、信頼度に応じて実行長を適応的に決めることで、精度を保ちつつ約3倍高速化した学習不要のデコーダ。

詳しい要約

1. どんなもの?

- Vision-and-Language Navigation (VLN) の policy が自己回帰的に行動列を生成する際の待ち時間を削減する、training-free な decoder「VLN-Flash」 - 短い horizon の行動 plan を 1 回の forward pass で並列に評価し、実行する行動数を適応的に決める - Uni-NaVid や StreamVLN 上で評価され、実機 Unitree GO2 でも検証されている

2. 先行研究と比べてどこがすごい?

- 従来の native autoregressive decoding は依存する予測の連鎖を待つ必要があった - VLN-Flash は small discrete action vocabulary を活かし、short-horizon plan を並列 scoring することで action decoding を約 3 倍高速化 - 速度だけでなく、R2R-CE と RxR-CE で success rate と SPL を改善し、success は最大 2.7 percentage points 向上 - 学習を必要としない training-free な手法である点も特徴

3. 技術・手法の肝は?

- 完全な action-prefix tree を 1 回の forward pass で評価する training-free decoder - branch-specific attention と matched token positions により、各 prefix の conditional action distribution を exact arithmetic で元の policy と一致させる - 各深さで stepwise-greedy prefix とその最強の代替案との score margin を用い、実行する行動数を決定 - 選んだ深さで最も高い joint score の plan を実行してから再観測する

4. どうやって有効だと検証した?

- 同一入力上で Uni-NaVid と StreamVLN の native autoregression と比較し、action decoding がほぼ 3 倍高速化することを確認 - R2R-CE と RxR-CE で success rate と SPL を native autoregressive decoder と比較 - Unitree GO2 実機で navigation success の改善と、network transmission time を差し引いた行動間の平均待ち時間の約 160 ms 削減を確認

5. 議論はある?

- 要旨からは不明 - ただし score margin に基づく適応的な実行長の選択や、exact arithmetic での分布一致の前提条件について議論の余地があると考えられる

6. 次に読むべき論文は?

- Uni-NaVid - StreamVLN - R2R-CE および RxR-CE に関する VLN 研究 - native autoregressive decoding を用いる VLN policy の関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ruizhe Xie, Honghua Chen, Binglin Wang, Tong Guo, Xu Tang, Puti Yan, Shaoxiong Cai

分類: cs.RO, cs.CV

原文アブストラクト

When a vision-and-language navigation policy generates an action sequence autoregressively, the robot waits for a chain of dependent predictions. A small discrete action vocabulary makes it possible to score all short-horizon plans in parallel. We introduce VLN-Flash, a training-free decoder that evaluates the complete action-prefix tree in a single forward pass. Branch-specific attention and matched token positions preserve the original policy's conditional action distribution for each prefix in exact arithmetic. We use the score margin between the stepwise-greedy prefix and its strongest alternative at each depth to decide how many actions to execute. The robot then executes the plan with the highest joint score at the chosen depth before observing again. On matched inputs, VLN-Flash achieves a nearly $3\times$ speedup in action decoding over native autoregression on Uni-NaVid and StreamVLN. Compared with the native autoregressive decoders, it improves success rate and success weighted by path length (SPL) on R2R-CE and RxR-CE, with success gains up to 2.7 percentage points. On a Unitree GO2, VLN-Flash improves navigation success and cuts the mean wait between actions by about 160 ms after subtracting network transmission time.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2Google DeepMind、ロボット向けAIを発表新製品・発表
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  5. 5SoftBank主導、Agile Robotsが5億ドル調達 NVIDIAと日立も参加資金調達

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI