日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
VLAarXiv:2611.03585

幻想を見抜く:ワールドアクションモデルのためのテスト時スケーリング

Seeing Through the Illusion: Test-Time Scaling for World Action Models

シェア:XThreadsFacebookLINEはてブBluesky

ワールドアクションモデルが生成する行動と想像未来の整合性を評価する事前選択器WISEを提案し、モデルを凍結したまま複数候補から最良を選ぶことでロボットタスクの成功率を大幅に向上させた。

詳しい要約

1. どんなもの?

- World action models (WAMs) は action と imagined future を同時生成するが、もっともらしい予測が co-generated action で実現されるとは限らない。 - 本論文は WISE (World Action Inference Scaling through Evaluation) を提案。 - 実行前の pre-execution selector。 - 各 sampled rollout を複数スコアで評価し最高スコア候補を実行。 - WAM 自体は frozen のまま。 - 対象はロボティクスの closed-loop 行動生成。

2. 先行研究と比べてどこがすごい?

- 既存の selector と比較して aggregate で +4.0 / +0.9 points 上回る。 - 単一スコアではなく複数観点を融合する点が特徴。 - 4 candidates per decision という小さな sample 数で改善。 - RoboLab + Cosmos 3 Edge: 6.0% → 24.0%。 - LIBERO + DreamZero: 75.1% → 78.3%。 - WAM を再学習せず test-time scaling で性能向上させる点が実用的。

3. 技術・手法の肝は?

- WISE は各 sampled rollout を次のスコアで評価。 - action validity と temporal regularity。 - proposed action と imagined motion の inverse-dynamics consistency。 - instruction-conditioned task progress。 - これらを融合し最高スコア候補を実行。 - WAM は frozen のまま、pre-execution で選択のみ行う。 - 4 candidates per decision で動作。

4. どうやって有効だと検証した?

- RoboLab と Cosmos 3 Edge で closed-loop success を評価。 - 6.0% → 24.0%。 - LIBERO と DreamZero で mean success を評価。 - 75.1% → 78.3%。 - 既存 best selector と aggregate で比較し +4.0 / +0.9 points。 - component ablations と agreement analyses を実施。 - 3 スコアが候補を異なる順位付けにすることを確認。 - task progress が fused decision で最大の重みを持つことを確認。

5. 議論はある?

- 3 つのスコアは候補の順位付けが互いに異なり、融合の意義が示唆される。 - task progress が fused decision で最大の重みを占める。 - 4 candidates per decision という設定での結果であり、他の candidate 数や WAM への一般性は要旨からは不明。 - 計算コストや失敗モードの詳細は要旨からは不明。

6. 次に読むべき論文は?

- Cosmos 3 Edge (WAM)。 - DreamZero (WAM)。 - RoboLab / LIBERO ベンチマーク。 - inverse-dynamics consistency を用いる関連手法。 - test-time scaling / best-of-N selection 系の研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Cheikh Ahmed, Mahdi Mostajabdaveh, Milad Yazdani, Zirui Zhou

分類: cs.RO

原文アブストラクト

World action models (WAMs) jointly generate actions and imagined futures, but a plausible prediction need not be realized by its co-generated action. We introduce WISE (\emph{World Action Inference Scaling through Evaluation}), a pre-execution selector that scores each sampled rollout on action validity and temporal regularity, inverse-dynamics consistency between the proposed action and the imagined motion, and instruction-conditioned task progress, and executes the highest-scoring candidate while keeping the WAM frozen. With four candidates per decision, WISE raises closed-loop success from 6.0\% to 24.0\% on RoboLab with Cosmos~3 Edge and from 75.1\% to 78.3\% mean success on LIBERO with DreamZero, and exceeds the best existing selector in aggregate by 4.0 and 0.9 points. Component ablations and agreement analyses show that the three scores rank candidates differently and that task progress carries the largest weight in the fused decision.

関連論文

PR本紙発行元 EmplifAI