日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

安全計画arXiv:2611.19466

学習済み世界モデルにおける逐次凸計画法による安全なオフライン計画

Successive Convexification in Learned World Models for Safe Offline Planning

シェア:XThreadsFacebookLINEはてブBluesky

学習した世界モデルの潜在空間で制御バリア関数を制約とした逐次凸計画(SCP)により安全な計画を立てる手法を提案し、サンプリングベース手法より違反が少なく長いホライズンで高いリターンを得た。

詳しい要約

1. どんなもの?

- 学習した world model の latent space 上で、安全制約付きの offline planning を行う手法。 - 計画を successive convex program (SCP) として定式化し、horizon の各ステップで学習した discrete-time control barrier function を制約として課す。 - 環境との追加相互作用なしに、offline data から学習したモデル上で plan を生成する。

2. 先行研究と比べてどこがすごい?

- 従来の sampling-based planner (MPPI, CEM) は、サンプルした行動列をスコアリングまたは棄却することでしか安全制約を扱えない。 - 提案法は SCP により制約を明示的に課す点が異なる。 - 実験では、128倍多くのサンプルを引く MPPI・CEM と比べて違反が少ない(ただし主比較では有意ではない)。 - 長い horizon ではより高い return を得る。 - sampled start なしの SCP よりはるかに安全。 - Lipschitz-bounded model では SCP の収束回数が多い。 - 各ステップで plan が feasible な first-order optimal KKT point か、近傍に feasible plan がないかを報告できる。

3. 技術・手法の肝は?

- 安全計画を latent space 上の successive convex program (SCP) として定式化。 - 学習した discrete-time control barrier function を horizon の各ステップの制約として課す。 - SCP は滑らかな dynamics を要求するため、smoothed MaxMin activations と spectrally normalised layers でネットワークを構成。 - 線形化誤差を Lipschitz bound と smoothing width で評価・bound する。 - SCP は局所手法のため、sampled plan を初期解として開始する。

4. どうやって有効だと検証した?

- Safety-Gymnasium の2つの navigation タスクで、offline data を用いて検証。 - 主比較では、128倍多くのサンプルを引く MPPI・CEM と同等の wall-clock time で違反が少ない(ただし有意ではない)。 - 長い horizon でより高い return を得ることを確認。 - sampled start なしの SCP よりはるかに安全であることを確認。 - Lipschitz-bounded model で SCP の収束回数が多いことを確認。

5. 議論はある?

- 主比較での違反数の優位性は統計的に有意ではない。 - SCP は局所手法であり、sampled start に依存する。 - 滑らかな dynamics を確保するためのネットワーク構成と線形化誤差の bound が前提。 - 各ステップで feasible な first-order optimal KKT point か、近傍に feasible plan がないかを報告できる点が sampling との違い。 - 実装は公開されている。

6. 次に読むべき論文は?

- MPPI (Model Predictive Path Integral control) - CEM (Cross-Entropy Method) - discrete-time control barrier function - Safety-Gymnasium - successive convexification (SCP) を用いた安全計画の関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Samuel Younger

分類: cs.LG, cs.RO, eess.SY

原文アブストラクト

World models learned from offline data allow an agent to plan without further interaction with the environment, but the sampling-based planners used with them handle safety constraints only by scoring or rejecting sampled action sequences. We instead pose safe planning in the latent space of a learned world model as a successive convex program (SCP), in which a learned discrete-time control barrier function is imposed as a constraint at every step of the horizon. SCP requires smooth dynamics, so we build the networks from smoothed MaxMin activations and spectrally normalised layers, and bound the resulting linearisation error in terms of the Lipschitz bound and the smoothing width. As SCP is a local method, we start it from a sampled plan. On two Safety-Gymnasium navigation tasks with offline data, this planner has fewer violations than MPPI and CEM drawing 128 times as many samples at equal wall-clock time in our main comparison, though not significantly, and earns greater return at longer horizons, and is much safer than SCP without a sampled start. SCP converged more often on Lipschitz-bounded models. Unlike sampling, it also reports at each step whether its plan is a feasible, first-order optimal KKT point of the planning problem in the model, or that no feasible plan was found nearby. Our implementation is publicly available at https://github.com/youngers2006/scwm.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2Google DeepMind、ロボット向けAIを発表新製品・発表
  3. 3GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  4. 4パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  5. 5SoftBank主導、Agile Robotsが5億ドル調達 NVIDIAと日立も参加資金調達

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI