日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
物理推論arXiv:2610.34921

検証器に基づく自己進化型物理推論フレームワークPhysEvolve

PhysEvolve: Verifier-grounded Self-evolution for Physical Reasoning with Executable Worlds

シェア:XThreadsFacebookLINEはてブBluesky

VLMが提案した実行可能な世界プログラムを物理エンジンで検証し、反事実的タスクを自動生成してGRPOで自己進化させる物理推論学習手法を提案。

詳しい要約

1. どんなもの?

- 物理推論のためのVLM向け自己進化フレームワーク「PhysEvolve」 - モデルが提案する実行可能なworld programと、決定論的physics engineによるシミュレーションで訓練データを自動生成 - 観測動画が事実軌道しか持たない問題に対し、反事実(counterfactual)分岐を合成 - 人間の介入データなしでVLMの因果的物理推論を訓練する枠組み

2. 先行研究と比べてどこがすごい?

- 従来の自己進化パラダイムを物理領域へ拡張 - 観測データの不足(事実軌道のみ)を、外部の真実源(physics engine)で補う点が新しい - モデル提案worldの妥当性検証と、介入下の代替結果検証の両方をverifierで行う - 人間アノテーションなしでPhysBench等のベンチマーク改善を報告

3. 技術・手法の肝は?

- 共有VLMが実行可能なworld programとevidence schemaを提案 - 決定論的physics engineが有効worldを凍結し、baselineとbody-elided counterfactual分岐をシミュレート - 離散的でanswer-boundな視覚タスクを合成 - タスク solvingからのexact verifier feedbackで、GRPOにより共有policyを更新 - 物理的意図に対する適応的curriculumも同時に更新

4. どうやって有効だと検証した?

- 開始モデルはQwen3-VL-8B-Instruct - PhysBench、CausalPhys、ContPhyで評価 - PhysBench Throwingで+8.8点、ContPhy Counterfactual Removalで+7.4点、Goal-Pitで+24.4点 - 改善はinteraction-sensitiveおよびaltered-world質問に集中 - cloth、fluid、soft bodiesや実世界動画へのzero-shot転移を報告

5. 議論はある?

- 効果がinteraction-sensitive/altered-world質問に集中する点が議論対象 - 未見の複雑ダイナミクスや実動画へのzero-shot転移の範囲・限界は要旨からは不明 - physics engineへの依存やworld program提案の品質影響は要旨からは不明 - 人間介入データ不要という主張の一般性は要旨からは不明

6. 次に読むべき論文は?

- PhysBench(物理推論ベンチマーク) - CausalPhys(因果物理推論) - ContPhy(反事実物理) - GRPO(強化学習手法) - Qwen3-VL-8B-Instruct(ベースVLM)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jinyuan Hu, Yilei Jiang, Chen Tang, Minghong Cai, Xinran Liu, Xiangyu Yue

分類: cs.AI

原文アブストラクト

Physical reasoning underpins how embodied systems understand and act in the physical world, yet vision-language models (VLMs) remain unreliable on questions about dynamics and physical causality. Progress is critically constrained by the scarcity of grounded counterfactual training data, as observational videos capture only the factual trajectory that occurred. The self-evolving paradigm offers a route beyond fixed datasets by enabling models to construct their own training problems. Extending this paradigm to physics, however, requires an external source of truth that can both validate model-proposed environments and verify alternative physical outcomes under intervention. We introduce \physevolve{}, a verifier-grounded self-evolving framework that trains VLMs for causal physical reasoning from model-proposed executable worlds and simulation-authored tasks. At each round, a shared VLM proposes executable world programs and evidence schemas; a deterministic physics engine freezes each valid world, simulates matched baseline and body-elided counterfactual branches, and synthesizes discrete, answer-bound visual tasks. Exact verifier feedback from task solving updates both the shared policy via GRPO and an adaptive curriculum over physical intents. Starting from Qwen3-VL-8B-Instruct, \physevolve{} achieves targeted gains across PhysBench, CausalPhys, and ContPhy without human intervention data, improving PhysBench Throwing by $8.8$ points and ContPhy Counterfactual Removal and Goal-Pit by $7.4$ and $24.4$ points. These gains concentrate on interaction-sensitive and altered-world questions, demonstrating zero-shot transfer of causal principles to unseen complex dynamics (cloth, fluid, soft bodies) and real-world video.

関連論文

PR本紙発行元 EmplifAI