停滞の正体:JEPAプランナーの行き詰まり診断と対策
Stuck in Place: Stall Diagnosis and Remedies for JEPA Planners
JEPA世界モデルによるプランニングの失敗の大半は物体が動かない「停滞」であり、予測誤差の記憶や再初期化でその固定点を破る手法Unstickを提案した。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Junhyeok Lee, Dongheon Lee, Kyu Sung Choi
分類: cs.RO
原文アブストラクト
Joint-embedding predictive architecture (JEPA) world models plan from pixels with model predictive control, yet often fail on tasks their model should handle. Test-time adaptation attributes such failures to model error under distribution shift and updates the weights on the current episode, without checking this attribution against the planning loop itself. We follow the executed planning loop on pushing tasks. In most settings, with and without distribution shift, nearly all failures (at least 96%) are stalls, where the object stays in place while the model predicts progress. The warm-started gradient-descent (GD) planner then returns nearly the same plan, a fixed point where the agent mostly idles. We propose Unstick, which pairs on-policy fine-tuning before deployment with a fixed-weight loop breaker: a residual memory of the episode's prediction errors or random re-initialization at every replan. With GD, Unstick recovers most of the adaptation gain on pushing tasks with the memory, and with re-initialization most of it on shape shifts but much less on visual shifts. A large part of what limits these planners under GD is thus a fixed point of the planning loop, present with and without distribution shift, which a planner with fixed weights can break. Code is available at https://github.com/jhlee0619/unstick.
関連論文
- いつ精緻化すべきか:凍結視覚世界モデルのための選択的探索モデルベース計画
- 生成的軌道計画によるモデルベースオンライン意思決定モデルベース計画
- どれだけ近いかではなく、あとどれだけか:潜在世界モデルの計画のための学習型時間距離指標モデルベース計画
- 遠くへ届くには近くを狙え:凍結世界モデルは思うより賢く計画できるモデルベース計画
- プリズマティック・ワールドモデル:ハイブリッド系の計画のための合成可能なダイナミクス学習モデルベース計画
- ロバスト計画のための因果構造分布の学習モデルベース計画
