日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2611.20010

PlanDiv: 潜在プランによる視覚言語行動モデルのテスト時スケーリング

PlanDiv: Test-Time Scaling with Latent Plans for Vision-Language-Action Models

シェア:XThreadsFacebookLINEはてブBluesky

VLAポリシーのテスト時スケーリングで、ノイズではなく潜在プランごとに候補を多様化する行動ヘッドを提案し、CALVINやLIBERO、実機Frankaで成功率を向上させた。

詳しい要約

1. どんなもの?

- VLA (Vision-Language-Action) ポリシーのための test-time scaling 手法「PlanDiv」の提案。 - 複数の action candidate を生成し最良のものを実行する従来の test-time scaling の限界を指摘。 - 候補を『plan』の違いで多様化させる action head を導入。 - 対象タスクは CALVIN、LIBERO-Long、実機 Franka arm。

2. 先行研究と比べてどこがすごい?

- 従来の test-time scaling は単一 decoder から候補を resample するため、候補間の差が plan ではなく noise に由来し、return が早期に飽和。 - CALVIN で 4→8 候補に増やしても完了タスク数の増分は 0.06–0.07 に留まる。 - PlanDiv は plan ごとに候補を生成し、8 候補で CALVIN ABC→D の five-task chain success を 56.9%→69.9% に改善。 - autoregressive、plan-free、same-plan resampling の 8 候補は最大 64.9% に留まる。 - same-plan baseline は PlanDiv 自身の checkpoint で plan を固定したものなので、差は plan 由来と主張。

3. 技術・手法の肝は?

- 軽量 planner が K 個の latent plan hypothesis を提案。 - 共有 masked-diffusion executor が単一 backbone pass から plan ごとに action chunk を 1 つずつ decode。 - ポリシーは自身の likelihood が最も高い chunk を実行。 - plan は plan label や reward なしに、demonstration のみから学習。

4. どうやって有効だと検証した?

- CALVIN ABC→D で five-task chain success を比較(56.9%→69.9%、対照は最大 64.9%)。 - LIBERO-Long で single-candidate failure の削減率を比較(4 plans で 40%、matched resampling は最大 21%)。 - 実機 Franka arm で OpenVLA-OFT+ baseline と比較。 - 解が 1 つのタスクでは同等。 - 解が 2 つあるタスクでは 54 試行中 51 成功(baseline は 40/54)。

5. 議論はある?

- 利得はタスクが複数の解を持つ場合に顕著で、単一解タスクでは baseline と同等。 - plan が label や reward なしで demonstration から学習できる点を主張。 - 候補数の増加そのものではなく plan の多様性が効くことを same-plan baseline で対比。 - 限界や失敗事例、計算コストの詳細は要旨からは不明。

6. 次に読むべき論文は?

- 比較対象として言及された test-time scaling の resampling 手法(autoregressive、plan-free、same-plan resampling)。 - baseline の OpenVLA-OFT+。 - 評価に用いられた CALVIN、LIBERO-Long。 - 関連する VLA ポリシー全般(OpenVLA 系)や masked-diffusion executor の文献。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Hanbo Zhang, Lianlei Shan, Liuhaichen Yang, Zezhi Tang

分類: cs.RO, cs.CV, cs.LG

原文アブストラクト

Test-time scaling improves vision-language-action (VLA) policies by drawing several action candidates and executing the best one. We find that its returns diminish quickly when the candidates are resampled from one decoder: they differ by noise rather than by plan, and for each of three resampling sources, going from four to eight candidates adds only 0.06-0.07 to the average number of completed tasks on CALVIN. We introduce PlanDiv, an action head that makes the candidates differ by plan: a lightweight planner proposes K latent plan hypotheses, a shared masked-diffusion executor decodes one action chunk per plan from a single backbone pass, and the policy executes the chunk that its own likelihood ranks highest. The plans are learned from demonstrations alone, without plan labels or rewards. With the backbone, data and training recipe held fixed, eight plan-conditioned candidates raise five-task chain success on CALVIN ABC$\rightarrow$D from 56.9% to 69.9%, while eight candidates from autoregressive, plan-free or same-plan resampling reach at most 64.9%. The same-plan baseline is PlanDiv's own checkpoint with the plan held fixed, so this gap comes from the plans, not from drawing more samples. On LIBERO-Long, four plans remove 40% of single-candidate failures, against at most 21% for matched resampling. On a real Franka arm the gain appears where a task admits more than one solution: PlanDiv is on par with a single-output OpenVLA-OFT+ baseline on a one-solution task and succeeds in 51 of 54 trials against 40 of 54 on two tasks with two solutions.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2Google DeepMind、ロボット向けAIを発表新製品・発表
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  5. 5SoftBank主導、Agile Robotsが5億ドル調達 NVIDIAと日立も参加資金調達

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI