日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
VLAarXiv:2609.20646

TraceFlow: 成功・失敗トレースで凍結フローマッチング方策を導く

TraceFlow: Guiding Frozen Flow-Matching Robot Policies with Success and Failure Traces

シェア:XThreadsFacebookLINEはてブBluesky

ロボットの成功・失敗ロールアウトの行動密度を進捗整合ガイダンス場に変換し、重みを更新せずに凍結フローマッチングVLA方策の行動生成を補正する手法。実機梱包タスクで成功率が21/50から39/50に向上。

詳しい要約

1. どんなもの?

- 視覚言語行動(VLA)ポリシーとflow-matching行動expertを対象としたtest-time guidance手法。 - 凍結したポリシーの重みを更新せず、成功・失敗rolloutの行動密度を進捗整合的な補正場に変換する。 - 各rolloutの終端結果bitのみをラベルとして使い、TraceBankに時系列のstate-action記録を蓄積する。 - 実機の順序付きpackingタスクとシミュレーションで評価。

2. 先行研究と比べてどこがすごい?

- 既存のtest-time手法はretrieved successes、learned critic、verifier、dynamics modelを入力に使うが、失敗rolloutを負の証拠として使うものはない。 - TraceFlowは終端結果bitのみで成功・失敗の両rolloutを活用し、凍結ポリシーに有界な補正を与える点が新しい。 - 実機packingで成功率が21/50から39/50へ向上、重み更新なしのstacking 1ラウンドで47に達し、誤順序エピソードが20から0に減少。

3. 技術・手法の肝は?

- 成功・失敗rolloutの行動密度を進捗整合的なguidance fieldに変換し、凍結flow-matching expertへの有界補正とする。 - TraceBankは時系列のstate-action記録と終端ラベルを保持し、対象タスクの訓練traceから開始し、展開ロボット自身のrolloutも追加する。 - 各rolloutにつき終端結果bitのみを使用し、他のラベルを必要としない。

4. どうやって有効だと検証した?

- 実機の順序付きpackingタスクで、base 21/50、TraceFlow 39/50、重み更新なしのstacking 1ラウンドで47を達成。 - シミュレーションではper-suite選択設定でRoboMemArena Sequenceが78.92%から91.50%、Transferringが54.41%から62.00%(stacking round 2)に向上。 - 26タスク集計は不変、CountingとOcclusionは1.12および1.42ポイント低下、LIBERO-Plus (Long)は+1.27ポイント(p=0.0733)。

5. 議論はある?

- stackingの利得は有限で、各分岐は10ラウンド前にピークに達する。 - bankの成功対失敗比はretrieval allocationを予測しない。 - シミュレーションでの利得は選択的であり、一部タスクでは性能が低下する。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究: retrieved successes、learned critic、verifier、dynamics modelを用いたtest-time手法。 - 関連手法: flow-matching action expert、VLA policy、RoboMemArena、LIBERO-Plus。 - 同分野の定番: test-time adaptation、retrieval-augmented control、imitation learning with failure data。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jiaxuan Zhang, Ruizhe Liu, Yu Zhang, Yanchao Yang

分類: cs.RO

原文アブストラクト

A vision-language-action (VLA) policy with a flow-matching action expert generates each action chunk (a short command sequence) by integrating a learned velocity field; once its weights are fixed, the success or failure of an earlier rollout cannot change the chunk generated now. Concurrent test-time methods give a frozen policy such an input from retrieved successes, a learned critic, a verifier, or a dynamics model, but none uses the robot's own failed rollouts as negative evidence with nothing but a terminal outcome bit. We introduce TraceFlow, a progress-aligned guidance field that turns the action densities of retrieved successful and failed rollouts into a bounded correction to a frozen flow-matching action expert, using one terminal outcome bit per rollout and no other label. Its TraceBank stores traces, time-ordered state-action records with a terminal label, starts from the target-task training traces, and later admits the deployed robot's own rollouts. On an ordered real-robot packing task the base completes 21 of 50 trials in order, TraceFlow 39, and one stacking round without any weight update 47, with wrong-sequence episodes falling from 20 to 0. In simulation the gain is selective: with per-suite selected settings, TraceFlow raises RoboMemArena Sequence from 78.92\% to 91.50\% task success and Transferring from 54.41\% to 62.00\% at stacking round 2, leaves the 26-task aggregate unchanged, lowers Counting and Occlusion by 1.12 and 1.42 points, and changes LIBERO-Plus (Long) by +1.27 points (p = 0.0733). Stacking gains are finite, every branch peaking before round ten, and the bank's success-to-failure ratio predicts no retrieval allocation.

関連論文

PR本紙発行元 EmplifAI