日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
VLAarXiv:2610.28166

推論を分布として扱う:視覚言語行動モデルのための生成的プラン潜在表現

Reasoning as a Distribution: Generative Plan Latents for Vision-Language-Action Models

シェア:XThreadsFacebookLINEはてブBluesky

VLAモデルの推論状態をプラン上の低次元条件付き分布として表現し、再学習なしにプランのサンプリング・選択・結果による再重み付けを可能にした研究。

詳しい要約

1. どんなもの?

- Vision-Language-Action (VLA) ポリシーにおける推論状態を、単一表現ではなく計画上の低次元条件付き分布として表す Generative Plan Latent (GPL) を提案する研究。 - 計画とは「どの物体・把持・経路を使うか」などの中間的意思決定を指す。 - 推論状態を『アドレス可能』にし、VLA の再学習なしに plan のサンプリング(coverage)、要求に応じた選択(steering)、実行結果による再重み付け(outcome adaptation)を可能にする。

2. 先行研究と比べてどこがすごい?

- 既存の reasoning 付き VLA は中間決定を単一の表現に圧縮しており、複数の有効な plan が存在する場合に代替案が隠れてしまう。 - GPL は reasoning state を plan 上の分布として保持することで、代替 plan の保持・選択・修正を可能にする点が異なる。 - 同じ guidance を native action distribution に与えても信頼できる改善が見られなかったのに対し、plan への steering では成功率が大きく向上した点を対比している。

3. 技術・手法の肝は?

- reasoning state を plan(物体・grasp・route など)上の低次元条件付き分布としてモデル化する Generative Plan Latent (GPL) を導入。 - 分布として持つことで、再学習なしに plan のサンプリング(coverage)、要求に基づく選択(steering)、deployment outcomes による再重み付け(outcome adaptation)が可能。 - 明示的な plan が観測から既に決まらない decision information を持つ場合に最も有用であることを示す分析を含む。

4. どうやって有効だと検証した?

- SimplerEnv manipulation で $π_0$ を用いて coverage・steering・outcome adaptation の3つを検証。 - 分析を RoboCasa、LIBERO、maze domain に拡張。 - plan の steering により要求に従う実行の割合が 0.48 から 0.94 に向上。同一 guidance を native action distribution に適用しても信頼できる利得は見られなかった。

5. 議論はある?

- 明示的な plan は、観測から既に決定されない decision information を運ぶ場合に最も有用であると議論。 - native action distribution への guidance では信頼できる改善が得られないことから、plan レベルでの表現・操作の重要性を示唆。 - 具体的な限界や失敗ケースについては要旨からは不明。

6. 次に読むべき論文は?

- 要旨で比較・参照されている $π_0$、SimplerEnv、RoboCasa、LIBERO に関する研究。 - reasoning を伴う VLA ポリシー(例: 中間推論を単一表現に圧縮する既存手法)の代表的研究。 - plan レベルの分布表現や steering に関連する generative planning / latent variable モデルの定番研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Matteo Cercola, Katie Z Luo, Milan Ganai, John Alora, Simone Formentin, Marco Pavone

分類: cs.RO

原文アブストラクト

Vision-Language-Action (VLA) policies increasingly reason before acting, but existing reasoning models compress this intermediate decision into a single representation. When several plans are valid, this commitment hides alternatives that could otherwise be selected or revised. We introduce the Generative Plan Latent (GPL), which represents the reasoning state as a low-dimensional conditional distribution over plans, such as which object, grasp, or route to use. This makes the reasoning state addressable: without retraining the VLA, plans can be sampled (coverage), selected on request (steering), and reweighted by deployment outcomes (outcome adaptation). We test all three on SimplerEnv manipulation with $π_0$, and extend the analysis to RoboCasa, LIBERO, and a maze domain. Steering the plan raises the fraction of executions that follow the request from 0.48 to 0.94, while the same guidance on the native action distribution shows no reliable gain. Finally, we show that an explicit plan is most useful when it carries decision information not already determined by the observation.

関連論文

PR本紙発行元 EmplifAI