日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2611.23746

予測力から方策学習可能性へ:動画生成モデルの事前知識を活用するZERITH V2.5

ZERITH V2.5: From Predictive Power to Policy Learnability

シェア:XThreadsFacebookLINEはてブBluesky

動画生成モデルの中間特徴を行動方策が読み取るvideo-actionモデルを提案し、予測学習の監督方法が後続の行動学習に与える影響を実験的に分析した。

詳しい要約

1. どんなもの?

ビデオ生成モデル(video generation model)の中間特徴をaction policyが読み取るvideo-action model(VAM)「ZERITH V2.5」を提案し、固定されたdemonstrationsと固定された総更新回数の下で、どのようなpredictive trainingが後続のaction learningを改善するかを調べる研究。人間が未知物体の状態変化を予測できても巧みに制御できないという予測と制御のギャップに動機づけられている。

2. 先行研究と比べてどこがすごい?

予測学習の監督の与え方が後続のaction learningに影響することを示した点。多くのnoise levelでadaptすると大きな利得が得られる一方、deployment時に使うnoise levelのみでadaptしても利得がない。さらにweight-transfer実験で、利得はadapted weightsがvideo generation model内に残る場合に持続し、action policyの初期化にのみ使うと消えることを示す。

3. 技術・手法の肝は?

action policyがvideo generation modelの中間特徴を読み取るVAM構成。固定demonstrations・固定総更新回数の統制下で、video predictive trainingの監督方法(adaptするnoise levelの範囲)とweight-transfer条件を比較。joint training開始時のinitial lossとgradient測定により、target-domain predictive trainingがvideo modelの開始状態を良くし、その後の予測と行動のjoint learningを容易にすることを分析。

4. どうやって有効だと検証した?

LIBERO、LIBERO-Plus、Meta-World MT50、実ロボットタスクで完全なpolicyを評価。加えてnoise level条件やweight-transfer条件の比較実験、joint training開始時のinitial loss・gradient測定により有効性を検証。

5. 議論はある?

予測学習の監督の与え方(adaptするnoise level)が後続のaction learningの成否を左右すること、利得がadapted weightsの置き場所に依存することを議論。target-domain predictive trainingがvideo modelの開始状態を改善するという機構的解釈を示す。データと訓練予算を揃えた条件下でpredictive adaptationが制御を改善すると主張。

6. 次に読むべき論文は?

要旨で参照・比較されている具体的な先行研究は明示されていない。関連手法としてvideo-action model(VAM)、video generation model、LIBERO/LIBERO-Plus/Meta-World MT50のbenchmark、predictive trainingとaction learningのjoint trainingに関する研究を挙げる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Chenxi Han, Ruby, Epoch, Orion, Luke, Bin, Dusk, Lyra, Cal, Alvin, Hubert, Alex, Jiahe Han, Tao Zhang, Hang Liu, Shoujie Li, Yizhe Li, Bokui Chen, Houde Liu, Guoping Pan, Yi Cheng

分類: cs.RO

原文アブストラクト

When humans learn to manipulate an unfamiliar object, they may already be able to anticipate how its state will change while still being unable to control it skillfully. This gap between prediction and control motivates us to study how the priors acquired by video generation models can be used effectively by an action policy. We present ZERITH V2.5, a video-action model (VAM) in which the action policy reads intermediate features of a video generation model, and use it to study, under fixed demonstrations and a fixed total number of updates, what kind of predictive training improves subsequent action learning. We find that the way video predictive training is supervised affects subsequent action learning. In our experiments, adapting at many noise levels yields a large gain, while adapting only at the noise level used at deployment yields none. Weight-transfer experiments further show that the gain stays with the adapted weights when they remain in the video generation model and disappears when they are used only to initialize the action policy. Initial loss and gradient measurements at the start of joint training indicate that target-domain predictive training gives the video model a better starting state, making subsequent joint learning of prediction and action easier. Under matched data and training budgets, predictive adaptation improves control. We evaluate the complete policy on LIBERO, LIBERO-Plus, Meta-World MT50, and real-robot tasks.

関連論文

  1. 1パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3日経クロステック、NVIDIA取締役会のファンCEO解任議論を報道 同社は同日、辞任を発表業界動向
  4. 4NVIDIA、ヒトの動きをロボットに適応する「SOMA Retargeter」を紹介研究・技術
  5. 5ティアフォーとTUM、Autowareでミュンヘン大型路線バスの自動運転開発を支援提携・買収

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI