日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2611.22356

予測入力先読みと選択的KVキャッシュ修復による停止低減VLA実行

SR-VLA: Stall-Reduced VLA Execution via Predicted-Input Lookahead and Selective KV Cache Repair

シェア:XThreadsFacebookLINEはてブBluesky

次時刻の観測と状態を予測してVLAの推論を先回りさせ、実入力との差分に応じてKVキャッシュを選択的に修復することで、精度を保ちつつ制御の停止を減らす手法を提案。

詳しい要約

1. どんなもの?

- VLA(Vision-Language-Action)ポリシーの推論遅延による制御ストールを削減する手法 SR-VLA の提案 - 現在の action chunk 実行中に、次境界の視覚観測と固有受容状態を予測し投機的に precompute する - 予測と実入力の差分に応じて action chunk を受理するか selective KV repair を起動する仕組み - LIBERO 上で同期ベースラインに対し query speedup と競合的な成功率を両立

2. 先行研究と比べてどこがすごい?

- 非同期 early inference は遅延を隠せるが、到着する実入力と結果が不整合になり得る - 無条件の KV cache 再利用は入力ミスマッチ時に危険、完全再計算は有用な precomputation を捨てる - SR-VLA は predicted-input lookahead と selective KV cache repair を組み合わせ、両極端のトレードオフを緩和 - 同期 π_{0.5} 比 2.67×、OpenVLA-OFT 比 1.27× の query speedup を報告

3. 技術・手法の肝は?

- 軽量な action-conditioned predictor が次境界の visual observations と proprioceptive state を生成 - 予測と task instruction で frozen VLA を駆動し、speculative KV cache と action chunk を事前計算 - 実入力が VLA に届いた後、predicted–real 差分と task conditions で受理可否を判定 - 不受理時は selective KV repair を発動し、必要な部分のみ修正

4. どうやって有効だと検証した?

- LIBERO 上で同期 π_{0.5} および OpenVLA-OFT ベースラインと比較 - query speedup 2.67×(π_{0.5} 比)と 1.27×(OpenVLA-OFT 比)を達成 - 平均 task success rate は競合水準を維持 - target-motion perturbation 下でも成功率はベースライン同等、1.52×–1.93× の query speedup

5. 議論はある?

- 予測誤差と受理/修復判定の閾値設計が性能と安全性の鍵になると考えられるが、詳細は要旨からは不明 - target-motion perturbation への頑健性は示されるが、他の分布シフトや実機での挙動は要旨からは不明 - selective KV repair の計算コストや修復範囲の最適性は要旨からは不明

6. 次に読むべき論文は?

- 比較対象の π_{0.5} および OpenVLA-OFT の原論文 - 非同期 VLA 推論や early inference に関する先行研究(具体名は要旨からは不明) - KV cache 再利用・speculative decoding 系の手法(同分野の定番として一般名で挙げる) - LIBERO ベンチマーク関連論文

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Tao Zhang, Yi Zhong, Jinhao Ruan, Yipeng Gao, Linfeng Zhong, Youming Yang, Yuan Wang

分類: cs.RO, eess.SY

原文アブストラクト

Vision-language-action (VLA) policies incur control stalls when inference blocks the next action chunk. Asynchronous early inference can hide latency, but its results may be inconsistent with the arriving actual inputs. Unconditional reuse risks acting on mismatched inputs, whereas full recomputation discards useful precomputation. We propose SR-VLA, combining predicted-input lookahead with selective KV cache repair. During current chunk execution, a lightweight action-conditioned predictor generates next-boundary visual observations and proprioceptive state. These predictions, together with the task instruction, drive the frozen VLA to precompute a speculative KV cache and action chunk. After real inputs are available to VLA, predicted--real differences and task conditions determine whether to accept the action chunk or trigger selective KV repair. On LIBERO, SR-VLA achieves $2.67\times$ and $1.27\times$ query speedups over the respective synchronous $π_{0.5}$ and OpenVLA-OFT baselines, while maintaining competitive average task success rates. Under target-motion perturbation, success remains baseline-comparable, with $1.52\times$--$1.93\times$ query speedup.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  4. 4SoftBank主導、Agile Robotsが5億ドル調達 NVIDIAと日立も参加資金調達
  5. 5NTT、ロボットの行動前に荷崩れを予測研究・技術

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI