日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2611.22295

類似性ではなく閉ループ有用性で実演を選ぶVLAの文脈内実演選択

Similar Is Not Useful: Selecting In-Context Demonstrations by Closed-Loop Utility

シェア:XThreadsFacebookLINEはてブBluesky

視覚的類似度で実演を選ぶ従来手法に対し、閉ループ成功率で有用性を測って実演を選ぶと成功率が大きく向上することを示した研究。

詳しい要約

1. どんなもの?

- 本論文は、retrieval-augmented VLA policy における in-context demonstration 選択の問題を扱う。 - 具体的には、frozen DINOv2 embeddings 上の visual similarity で demonstration を選ぶ既存手法(RICL on π0-FAST, LIBERO)を対象とする。 - demonstration pool を run time で差し替え可能にし、closed-loop success に基づく utility で各 demonstration をスコアリングする。 - 「似ていること」が「役に立つこと」と一致するかを検証する実証研究。

2. 先行研究と比べてどこがすごい?

- 先行の retrieval-augmented VLA は visual similarity で demonstration を選択していた。 - 本研究は similarity 選択が random と同等(+0.1 points)であることを示した点が新しい。 - utility 選択は similarity 選択を 10.8 points 上回る(p=3.2×10^-6)。 - 未学習の 12 tasks でも有効で、similarity は scene が異なる場合のみ機能し、同一 scene では chance に落ちることを示す。 - shipped の 20-demonstration pool に対しても utility-curated 5 が 7.0 points リードする。

3. 技術・手法の肝は?

- demonstration pool を run time で swappable にし、60 個の固定サイズ pool の closed-loop success を membership に回帰して各 demonstration の utility を推定する。 - utility 上位 5 個の pool と similarity 上位 5 個の pool、random pool を比較。 - 評価は初期状態をスコアリング用と disjoint に設定し、760 paired episodes・19 tasks で実施。 - best-of-ten direct search による pool 探索も行い、100 rollouts で gain の 2/3 を回収。 - utility-ordered retrieval を full pool 内で行う variant も検証。

4. どうやって有効だと検証した?

- 初期状態がスコアリングと disjoint な設定で、760 paired episodes・19 tasks を評価。 - utility 上位 5 pool は 66.4%、similarity 上位 5 は 55.7%、random は 55.5% の成功率。 - utility は similarity を 10.8 points 上回り(p=3.2×10^-6)、18 中 15 の untied tasks で正の効果。 - 未学習の 12 tasks でも有効。 - shipped 20-demonstration pool との比較で 560 paired episodes・2 evaluation runs において 7.0 points リード(p=0.006)。 - utility-ordered retrieval は 4.5 points リード(p=0.055)。

5. 議論はある?

- similarity は task 間で scene が異なる場合のみ識別力を持ち、同一 scene では chance に落ちる。 - 同一 task 内では pool の visual similarity と success の Spearman 相関は 0.10 にとどまる。 - gain の源泉は on-task closed-loop evidence であり、best-of-ten direct search で 2/3 を回収できるが 100 rollouts を要する。 - utility-ordered retrieval の優位(p=0.055)は統計的に限界的。 - 計算コストやスケーラビリティに関する議論は要旨からは不明。

6. 次に読むべき論文は?

- RICL on π0-FAST(本論文が対象とする retrieval-augmented VLA) - LIBERO(評価に用いられた benchmark) - DINOv2(similarity 選択に使われる frozen embeddings) - in-context demonstration selection / retrieval-augmented policy の関連研究(要旨では個別名の参照なし)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jiachen Li, Zhigen Zhao, Shihao Li, Dongmei Chen, Long Chen, Zhuo Xu

分類: cs.LG

原文アブストラクト

Retrieval-augmented vision-language-action (VLA) policies fill their context with the demonstrations whose frames look most like the current observation under frozen DINOv2 embeddings. We ask whether visual similarity selects the demonstrations that make the policy succeed. For a frozen retrieval-augmented VLA (RICL on $π_0$-FAST, LIBERO), we make the demonstration pool swappable at run time and score each demonstration's utility by regressing the closed-loop success of 60 fixed-size pools on their membership. On initial states disjoint from those used for scoring, pools of the five highest-utility demonstrations succeed on 66.4% of 760 paired episodes across 19 tasks, pools of the five most similar on 55.7%, and random pools on 55.5%. Utility beats similarity by 10.8 points ($p=3.2\times10^{-6}$; positive on 15 of 18 untied tasks), including on 12 tasks the policy was never primed on, and similarity-selected pools do no better than random ($+0.1$ points). Within a task, a pool's visual similarity to the test scenes tracks its success at Spearman 0.10; across tasks, similarity separates tasks whose scenes differ and falls to chance when two tasks share a scene. The gain comes from on-task closed-loop evidence: best-of-ten direct search over pools recovers two-thirds of it with 100 rollouts. Against the shipped 20-demonstration pool, utility-curated pools of five lead by 7.0 points over 560 paired episodes from two evaluation runs ($p=0.006$), and utility-ordered retrieval inside the full pool leads by 4.5 points ($p=0.055$).

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  4. 4SoftBank主導、Agile Robotsが5億ドル調達 NVIDIAと日立も参加資金調達
  5. 5NTT、ロボットの行動前に荷崩れを予測研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI