日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

世界モデルarXiv:2611.25980

行動効果マッチングで動態に忠実な世界モデルを学習する

Learning What Actions Change: Action Effect Matching for Dynamics-Faithful World Models

シェア:XThreadsFacebookLINEはてブBluesky

行動の微小な変化が将来の観測に与える影響を捉えるため、行動摂動による視覚変化の分布を学習する補助目的AFFECTを提案し、世界モデルのロールアウトを実結果に忠実にした論文。

詳しい要約

1. どんなもの?

- 目的 - 行動に応じた環境 dynamics を予測する world model の改善 - 実世界で行動を実行せずに結果を予測できるようにする - 課題 - 現行の world model は映像のリアリティは向上しているが、小さな行動変化が将来観測に与える影響を捉えられない - robotic policy evaluation や model-based planning では、ほぼ同一の行動が質的に異なる結果を生むため問題となる - 提案 - AFFECT と呼ぶ補助的な学習目的関数を提案 - 行動摂動により生じる視覚変化の分布を学習させる

2. 先行研究と比べてどこがすごい?

- 先行研究との比較 - 従来の world model は映像生成のリアリティ向上に注力し、行動変化への感度が不足していた - 同一初期状態からの繰り返し実行を必要とせずに、行動摂動への応答を学習できる点が新しい - すごい点 - 行動の小さな変化に対する将来観測の応答を、記録済み映像と整合するよう学習 - 実世界の DROID で policy 成功率と world model 内成功率の Pearson correlation が 0.47 から 0.79 に向上 - FVD が最大 23% 低下 - planning でも AFFECT 学習済み world model により task success が最大 8.3% 向上

3. 技術・手法の肝は?

- 核となる考え方 - 行動摂動により誘発される視覚変化の分布を学習する補助目的関数 AFFECT を導入 - 具体的な手法 - task-agnostic な human teleoperation で学習した policy の行動に、時間的に相関した noise を注入 - world model の生成映像が、この noise に対して記録映像と同じように応答するよう学習 - 同一初期状態からの繰り返し実行を必要としない - 学習の狙い - 行動の微小変化が将来観測に与える影響を world model が再現できるようにする

4. どうやって有効だと検証した?

- 検証環境 - OGBench simulation - 実世界の DROID および ALOHA-2 setups - 検証結果 - world-model rollouts が実際の結果に対してより忠実になることを確認 - DROID で policy 成功率の Pearson correlation が 0.47 から 0.79 に上昇 - FVD が最大 23% 低下 - planning において AFFECT 学習済み world model で行動選択すると task success が最大 8.3% 向上 - 詳細な評価プロトコル - 要旨からは不明

5. 議論はある?

- 示唆 - 行動変化への感度を高めることで、world model が policy evaluation や model-based planning に有用になる可能性 - 実世界の DROID や ALOHA-2 でも有効性を確認 - 限界・議論 - 時間的に相関した noise の設計や強度の影響は要旨からは不明 - 他のタスクやロボットへの汎化性の詳細は要旨からは不明 - 計算コストや学習安定性に関する議論は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究 - 明示的な参照論文は要旨からは不明 - 関連手法として挙げられるもの - world model を用いた model-based planning - robotic policy evaluation - OGBench - DROID - ALOHA-2 - 同分野の定番として検討すべきもの - Dreamer 系の world model - model-based RL における dynamics model 学習 - 映像生成評価指標 FVD を用いた world model 評価

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: John Won, Yonghoon Dong, Jinwoo Shin

分類: cs.RO, cs.CV

原文アブストラクト

World models aim to predict environment dynamics under actions, enabling the prediction of action consequences without executing them in the real world. Yet despite producing increasingly realistic videos, current world models often fail to capture how small action changes affect future observations. This limits their use in tasks such as robotic policy evaluation and model-based planning, where nearly identical actions can lead to qualitatively different outcomes. To address this, we propose AFFECT, an auxiliary training objective for learning the distribution of visual changes induced by action perturbations. Specifically, we inject temporally correlated noise into the actions of a policy trained on task-agnostic human teleoperation. We then train the world model so that its generated videos respond to this noise as the recorded videos do, without requiring repeated executions from the same initial state. Across OGBench simulation and real-world DROID and ALOHA-2 setups, AFFECT makes world-model rollouts more faithful to real outcomes. On DROID, the Pearson correlation between policy success rates in the world model and on the real robot rises from 0.47 to 0.79, alongside up to 23% lower FVD. These gains carry over to planning, where selecting actions with AFFECT-trained world models improves task success by up to 8.3%.

関連論文

  1. 1パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  2. 2川崎重工業のロボット外販を報道新製品・発表
  3. 3Boston Dynamics、GlobalFoundriesでAtlasを試験へ 半導体製造で2027年初頭から半導体・GPU
  4. 4丸文、RealManのロボットアームやヒューマノイドを国内販売提携・買収
  5. 5NVIDIA、SC26で科学研究向けAIエージェントとHPC基盤を発表新製品・発表

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI