日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2611.23843

進捗認識型再計画による長期的VLAモデル

RePlan-VLA: Progress-Aware Replanning for Long-Horizon Vision-Language-Action Models

シェア:XThreadsFacebookLINEはてブBluesky

VLAモデルの短期操作能力を活かし、ロボットの動きから進捗を監視して計画を適応的に修正するフレームワークを提案し、長期的タスクの成功率を向上させた。

詳しい要約

1. どんなもの?

- 長期的なロボット操作タスクのためのフレームワーク - 名称は RePlan-VLA - VLA モデルを土台にした long-horizon 実行支援 - 基本思想 - VLA に長期推論・記憶・進捗管理・エラー回復を全部背負わせない - VLA の short-horizon 操作能力だけを活用する - 特徴 - VLA-agnostic な枠組み - 元の VLA policy はそのまま保持し追加 fine-tuning 不要

2. 先行研究と比べてどこがすごい?

- 従来の VLA 直接適用 - 複数の相互依存する操作を含む long-horizon タスクで性能が低下 - 長期推論や記憶、進捗追跡、エラー回復まで VLA に要求 - RePlan-VLA の違い - VLA を長期実行の枠組みで包み、short-horizon 能力を長期実行に変換 - 追加 fine-tuning なしで既存 VLA policy をそのまま利用 - 性能面 - RoboCasa365 で success rate が次点比 +21.9% - CALVIN で +10.4% 改善

3. 技術・手法の肝は?

- 実行認識型フレームワーク - ロボットの motion を明示的に監視して進捗を評価 - 観測された結果に基づき将来の plan を適応的に修正 - 設計上の肝 - VLA policy 自体は変更せず保持 - 長期推論・記憶・進捗追跡・エラー回復を VLA の外側で担う - 詳細なアルゴリズムや plan 表現は要旨からは不明

4. どうやって有効だと検証した?

- ベンチマーク評価 - RoboCasa365 と CALVIN で検証 - 次に強い baseline と比較し success rate がそれぞれ +21.9%、+10.4% - 実機評価 - Franka Research 3 ロボットで実世界展開を検証 - 具体的なタスク設定や試行数は要旨からは不明

5. 議論はある?

- 主張 - VLA に長期推論や記憶を負わせず、short-horizon 能力を枠組みで活かす方針 - VLA-agnostic かつ fine-tuning 不要で適用しやすい - 制約・不明点 - 進捗評価や plan 修正の失敗時の挙動は要旨からは不明 - 実機評価の詳細や汎化性の議論は要旨からは不明

6. 次に読むべき論文は?

- 要旨で直接参照/比較されている研究は明示されていない - 関連して読むべき候補 - 基盤となる Vision-Language-Action (VLA) モデル - long-horizon 操作のための hierarchical planning / replanning 手法 - RoboCasa365 および CALVIN ベンチマークの代表的 baseline - Franka Research 3 を用いた実機ロボット操作研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Apoorva Vashisth, Manav Kulshrestha, Damon Conover, Zachary Kingston, Aniket Bera

分類: cs.RO, cs.AI, cs.LG

原文アブストラクト

Vision-Language-Action (VLA) models have emerged as a promising paradigm for general-purpose robotic manipulation, yet their performance often degrades on long-horizon tasks that require multiple interdependent manipulations. Instead of burdening the VLA policies with long-horizon reasoning, memory, action generation, progress tracking, and error recovery, we argue for leveraging their short-horizon manipulation capabilities within an execution-aware framework. To this end, we introduce \textnormal{\textbf{RePlan-VLA}}, a VLA-agnostic framework that translates a VLA's short-horizon capabilities into reliable long-horizon execution. RePlan-VLA explicitly monitors the robot's motion for progress evaluation, and adaptively revises the future plan based on observed outcomes. We preserve the underlying VLA policy entirely, requiring no additional fine-tuning. Experiments on RoboCasa365 and CALVIN benchmarks show an improvement of 21.9% and 10.4% in success rate over the next strongest baseline. We also validate our approach for real-world deployment on a Franka Research 3 robot.

関連論文

  1. 1パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3日経クロステック、NVIDIA取締役会のファンCEO解任議論を報道 同社は同日、辞任を発表業界動向
  4. 4NVIDIA、ヒトの動きをロボットに適応する「SOMA Retargeter」を紹介研究・技術
  5. 5ティアフォーとTUM、Autowareでミュンヘン大型路線バスの自動運転開発を支援提携・買収

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI