日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
VLAarXiv:2610.31423

FocusVLA: 将来意図に基づく動的視点ルーティングでVLAモデルを強化

FocusVLA: Future-Intent Guided Dynamic View Routing for Vision-Language-Action Models

シェア:XThreadsFacebookLINEはてブBluesky

将来の操作意図を予測してグローバル視点とローカル視点の使い分けを動的に切り替えることで、VLAモデルの多視点活用とタスク成功率を向上させた研究。

詳しい要約

1. どんなもの?

- Vision-language-action (VLA) モデル向けの枠組み - 多視点入力の活用を改善する stage-aware multi-view routing framework - ロボットマニピュレーションを対象 - 課題認識 - 既存 VLA は multi-view complementarity を十分活用できていない - policy が wrist view に持続的に依存しがち - manipulation stage 間で global-local view dependency を動的に調整できない - 提案の位置づけ - 将来の interaction intent を予測し、動的な view routing に用いる

2. 先行研究と比べてどこがすごい?

- 既存 VLA の限界を実験的に示す - multi-view complementarity を十分活用できない - wrist view への持続的依存 - stage 間での global-local 依存の動的調整ができない - 提案の差分 - stage-aware な multi-view routing を導入 - future interaction intent を予測して view routing を導く - タスク段階に応じて global/local 観測を適応的に協調 - 効果 - multi-view utilization を改善 - 既存 VLA の core architectures を変更せずに intent prediction と dynamic routing を統合可能

3. 技術・手法の肝は?

- 中核は stage-aware multi-view routing framework - 入力 - 多視点観測 - 言語指示 - 履歴行動 - 肝 - 履歴行動から future interaction intent を予測 - 予測した intent で action generation 中の dynamic view routing を誘導 - タスク段階ごとに global と local の観測を適応的に協調 - 統合性 - intent prediction と dynamic routing のモジュールを既存 VLA に追加可能 - 既存 VLA の core architecture は変更不要

4. どうやって有効だと検証した?

- ベンチマーク - RoboTwin 2.0 で評価 - 最強 baseline の $π_{0.5}$ に対し平均成功率 +10.10 pp - 実世界評価 - 成功率 71.7% から 85.0% へ改善 - $π_{0.5}$ 比で 13.3% の gain - 主張 - 多視点利用の改善と段階適応性・頑健性の向上を示す - 詳細な実験設定や被験タスク数は要旨からは不明

5. 議論はある?

- 要旨で示される議論の焦点 - 既存 VLA が multi-view complementarity を活用できていない点 - wrist view への持続的依存と stage adaptability の不足 - 提案の含意 - future interaction intent による view routing が段階適応性を高める - 既存 VLA へ追加可能で汎用性がある - 限界や失敗事例、計算コスト、real-world の詳細条件は要旨からは不明

6. 次に読むべき論文は?

- 比較対象として明示されている $π_{0.5}$ - 関連する基盤的手法 - Vision-Language-Action (VLA) モデル - multi-view 入力を用いるロボットマニピュレーション手法 - 評価環境 - RoboTwin 2.0 - 具体的な個別論文名は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Huixin Xu, Ziya Yu, Peng Li

分類: cs.RO, cs.AI

原文アブストラクト

Vision-language-action (VLA) models have become an important paradigm for robotic manipulation by unifying visual perception, language understanding, and action generation. Since reliable manipulation requires sufficient observation of objects, end-effectors, and their spatial relationships, multi-view inputs are widely used to provide complementary spatial information. However, our experiments show that existing VLA models do not fully exploit such multi-view complementarity. The policy tends to persistently rely on the wrist view, lacking the ability to dynamically adjust global-local view dependency across manipulation stages, which limits stage adaptability and robustness. To address this issue, we propose FocusVLA, a stage-aware multi-view routing framework. FocusVLA predicts future interaction intent from historical actions and uses it to guide dynamic view routing during action generation. By adaptively coordinating global and local observations across different task stages, FocusVLA improves multi-view utilization. On RoboTwin 2.0, FocusVLA improves the average success rate over the strongest baseline $π_{0.5}$ by 10.10 pp. In real-world evaluation, FocusVLA improves the success rate from 71.7\% to 85.0\%, achieving a 13.3\% gain over $π_{0.5}$. Moreover, the intent prediction and dynamic routing modules of FocusVLA can be integrated into existing VLA frameworks without modifying their core architectures.

関連論文

PR本紙発行元 EmplifAI