日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
自動運転/世界モデルarXiv:2610.17688

OccWAM: シーンから自己へのフローマッチングを統合した占有ワールドアクションモデル

OccWAM: Occupancy World-Action Models with Joint Scene-to-Ego Flow Matching

シェア:XThreadsFacebookLINEはてブBluesky

将来の占有グリッドと自車軌道をフローマッチングで同時生成する世界行動モデルを提案し、シーン中心と自己中心の2段階フローで相互に洗練させる。

詳しい要約

1. どんなもの?

- 将来の運転シーンをoccupancyで構造的・メートル的に表現するworld modelを基盤としたend-to-end自動運転の枠組み。 - OccWAMはoccupancy-nativeなworld-action modelで、scene表現を条件にflow matchingで密な将来occupancyと連続ego trajectoryを同時生成する。 - 二段階のscene-to-ego world-action flow matchingを導入し、第一段でscene-centric occupancyと絶対ego trajectoryを予測、第二段で予測worldをego frameに再インデックスしego-centric occupancyとmotionをrefineする。 - ビデオベースと異なりpixel合成せず、明示的なsemantic geometryを保持して直接planning推論に用いる。

2. 先行研究と比べてどこがすごい?

- 既存のoccupancy-aware plannerは、階層的couplingか並列multi-task学習でoccupancy予測とaction生成を結合していた。 - 階層的手法はoccupancyを完全予測された未来としてaction生成に先行させるか、action-conditioned rolloutとしてtrajectory評価に用いる。 - 並列multi-task手法は別branchや補助目的でoccupancyとplanningを同時予測する。 - これらのinterfaceは明示的な生成順序か役割の非対称性を保持し、trajectory形成中のworld predictionとaction generationの相互interactionを制限していた。 - OccWAMはjoint生成によりこの制限を克服し、closed-loop driving、open-loop planning、future occupancy predictionでstate-of-the-artを達成。

3. 技術・手法の肝は?

- scene表現を条件としたflow matchingにより、密な将来occupancyと連続ego trajectoryをjointly生成するoccupancy-native world-action model。 - scene-to-ego world-action flow matchingは二段階構成。 - 第一段:scene-centric occupancyと絶対ego trajectoryを予測し、将来scene evolutionの安定表現を得る。 - 第二段:同じ予測worldを初期trajectoryが誘導する将来ego frameに再インデックスし、ego motionを隣接pose incrementで表現、二回目のjoint flowでego-centric occupancyとmotionをrefineしてaction-aligned planningを行う。 - ビデオベースと異なりpixel synthesisを避け、明示的semantic geometryを保持。

4. どうやって有効だと検証した?

- Bench2DriveとnuScenesでの広範な実験を実施。 - closed-loop driving、open-loop planning、future occupancy predictionの各タスクでstate-of-the-art性能を実証。 - 具体的な評価指標やベースラインとの比較数値は要旨からは不明。

5. 議論はある?

- 既存の階層的・並列multi-task couplingが持つ明示的生成順序や役割非対称性が、world predictionとaction generationの相互interactionを制限する点を議論。 - OccWAMのjoint formulationと二段階flow matchingがこの制限を緩和することを主張。 - 限界や失敗ケース、計算コスト、リアルタイム性などの議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:hierarchical coupling、parallel multi-task learning、video-based world-action models。 - 関連手法:occupancy-aware planners、flow matching、end-to-end autonomous driving。 - 具体的な論文名は要旨からは不明。同分野の定番としてoccupancy predictionやworld model based planningの文献を挙げる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Qihang Huang, Wenhui Huang, Collister Chua, Shiyu Fang, Zhan Chen, Songyan Zhang, Zhidong Wang, Daiying Tian, Chen Lv

分類: cs.RO

原文アブストラクト

Occupancy world models provide a structured, metric representation of future driving scenes, making them a promising basis for end-to-end autonomous driving. However, existing occupancy-aware planners typically couple occupancy prediction and action generation through either hierarchical coupling or parallel multi-task learning. Hierarchical methods use occupancy either as a fully predicted future preceding action generation or as an action-conditioned rollout for trajectory evaluation, whereas parallel multi-task methods predict occupancy alongside planning through a separate branch or auxiliary objective. These interfaces retain either an explicit generation order or a role asymmetry, limiting reciprocal interaction between world prediction and action generation during trajectory formation. We propose OccWAM, an occupancy-native world-action model that jointly generates dense future occupancy and continuous ego trajectories via flow matching conditioned on scene representations. Building on this joint formulation, we introduce scene-to-ego world-action flow matching, a two-stage formulation. The first stage predicts scene-centric occupancy together with an absolute ego trajectory, providing a stable representation of future scene evolution. The same predicted world is then re-indexed into the future ego frames induced by the initial trajectory, where ego motion is represented through adjacent pose increments and a second joint flow refines ego-centric occupancy and motion for action-aligned planning. Unlike video-based world-action models, OccWAM preserves explicit semantic geometry for direct planning reasoning without pixel synthesis. Extensive experiments on Bench2Drive and nuScenes demonstrate state-of-the-art performance in closed-loop driving, open-loop planning, and future occupancy prediction.

関連論文

PR本紙発行元 EmplifAI