日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
VLAarXiv:2610.18568

WAVE-0: 軽量な潜在未来予測でVLA方策と世界行動モデルを橋渡し

WAVE-0: Bridging VLA Policies and WAMs with Lightweight Latent Future Prediction

シェア:XThreadsFacebookLINEはてブBluesky

事前学習済みVLAに軽量な潜在世界モデルを組み合わせ、将来予測を行動生成に直接活用することで、ロボットマニピュレーション性能を大幅に向上させた研究。

詳しい要約

1. どんなもの?

- どんなもの? - VLA policyとWAMを橋渡しするWAVE-0 (World-model-Augmented VLA Execution) というフレームワーク - 軽量なlatent world modelにより、VLAの意味理解と明示的な未来予測を接続 - 予測された行動結果が直接action generationを導く - 257Mのworld modelがVLM生成のlatent action planを未来表現に変換し、action expertを条件付け - latent planning、future prediction、action generationを統合

2. 先行研究と比べてどこがすごい?

- 先行研究と比べてどこがすごい? - 従来のVLAは行動の環境への影響を明示的にモデル化せず行動を生成 - 多くのWAMは高コストなvideo generationに依存 - latent代替手法は予測未来を補助ターゲットに使うか、大規模video pretrainingでlatent actionを推論 - WAVE-0はpixel reconstructionも大規模video pretrainingも不要 - 軽量latent world modelでVLAとWAMを橋渡し

3. 技術・手法の肝は?

- 技術や手法の肝はどこ? - 事前学習済みVLAを基盤とし、257Mのworld modelを追加 - VLM生成のlatent action planを予測未来表現に変換し、action expertを条件付け - world modelはground-truth robot actionsで直接訓練 - counterfactual ranking objectiveを採用 - pixel reconstructionや大規模video pretrainingを必要としない

4. どうやって有効だと検証した?

- どうやって有効だと検証した? - RoboTwin 2.0で91.47%の成功率 - LIBEROで98.7% - LIBERO-Plusで88.0%、LIBERO-Proで61.4%、LIBERO-Paraで75.0% - 実世界タスクでπ_{0.5}の成功率を38.3%から73.3%に改善 - 多様な分布シフト下での汎化性能を示す

5. 議論はある?

- 議論はある? - 要旨からは不明 - 限界や失敗事例、計算コスト、スケーラビリティに関する議論は記載なし

6. 次に読むべき論文は?

- 次に読むべき論文は? - 要旨で参照/比較されている研究: VLA policies、World action models (WAMs)、π_{0.5} - 関連手法: video generationベースのWAM、latent actionモデル、大規模video pretrainingを用いる手法 - 同分野の定番: RoboTwin 2.0、LIBERO、LIBERO-Plus、LIBERO-Pro、LIBERO-Para

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Haomin Wang, Anqiong Ji, Ke Wang, Zhongshan Liu, Ru Ying, Ran Zheng, Zhipeng Zhang

分類: cs.RO

原文アブストラクト

Vision-language-action (VLA) policies excel at generalist robotic manipulation but generate actions without explicitly modeling their environmental consequences. World action models (WAMs) incorporate future prediction, yet most rely on costly video generation, while latent alternatives either use predicted futures only as auxiliary targets or infer latent actions from suboptimal visual transitions through costly large-scale video pretraining. We introduce WAVE-0 (World-model-Augmented VLA Execution), a framework that bridges VLAs and WAMs through a lightweight latent world model. By connecting the semantic understanding of pretrained VLAs with explicit future prediction, WAVE-0 allows anticipated action consequences to directly guide action generation. Built on a pretrained VLA, its 257M world model translates VLM-generated latent action plans into predicted future representations that condition the action expert, unifying latent planning, future prediction, and action generation. The world model is trained directly on ground-truth robot actions with a counterfactual ranking objective, requiring neither pixel reconstruction nor large-scale video pretraining. WAVE-0 achieves success rates of 91.47% on RoboTwin 2.0 and 98.7% on LIBERO, along with 88.0%, 61.4%, and 75.0% on LIBERO-Plus, LIBERO-Pro, and LIBERO-Para, respectively. On real-world tasks, it improves the success rate of $π_{0.5}$ from 38.3% to 73.3%. These results demonstrate strong manipulation performance and generalization across diverse distribution shifts.

関連論文

PR本紙発行元 EmplifAI