arXiv、World Models向け反復型制御器「LePlanner」を公開

何が起きたか

arXivは2026-09-12、論文「LePlanner: An Iterative Amortized Controller For World Models」を公開した。論文は、凍結したworld-model predictorを使って潜在空間の行動列を構築・洗練する反復型の制御器LePlannerを提案している。推論では、探索型プランナーのような多数回のロールアウトを避けつつ、接触を含む課題でも単発ポリシーの弱点を抑えることを狙う設計である。

詳細

LePlannerは、到達後にその状態を維持することを促すarrival-and-hold objectiveで訓練される。この目的は、再計画を繰り返すことで目標到達が先送りされるhorizon-reset procrastinationを抑える狙いがある。さらにaction-Gaussian lossを加え、生成行動がオフラインデータセットの支持から外れにくいようにしている。 論文によると、LePlannerはnavigation、contact-rich manipulation、continuous-control environmentsで、探索型プランナーに匹敵またはそれを上回る性能を示しつつ、predictor evaluationsを桁で1つ少なくし、1回の決定あたりのwall-clock timeを3〜49倍短縮した。成功率はPushTで98%、Reacherで100%、TwoRoomsで100%、OGBench Cube taskで92%としている。

Key Facts

本紙の見方

LePlannerの新しさは、世界モデル上の計画を「探索」でも「単発の方策」でもなく、反復的に磨く軽量な制御器としてまとめた点にある。探索型プランナーのCEM、MPPI、iCEMは多くの予測ロールアウトを要し、単発推論型のポリシーは接触が多く行動分布が多峰的な課題で崩れやすい。論文はその中間に、凍結したworld-model predictorを前提にしたamortized iterative controllerを置いている。つまり、オンライン最適化を完全に捨てるのではなく、検索で得られる構造を反復方策に「移し替える」方向である。 この点は、論文が掲げるarrival-and-hold objectiveとhorizon-reset procrastinationの問題設定に表れている。再計画のたびに目標到達を先送りする失敗モードを、早い到達と維持を同時に促す学習で抑えようとしているからである。さらにaction-Gaussian lossでオフラインデータの支持域に行動を寄せており、反復制御の自由度を保ちながら、データ外の逸脱を抑える構成になっている。ここから読めるのは、LePlannerが単なる高速化手法ではなく、世界モデルとオフラインデータの境界をつなぐ設計であるという点だ。 業界構造への含意は、計算量の配分にある。探索型プランナーは1回ごとの意思決定で高い推論コストを払い、反対にポリシーは学習時に負荷を寄せる。LePlannerは、推論時の predictor evaluations を約1桁削減し、wall-clock time を3〜49倍短縮したとするため、ロボティクスや連続制御では「計算資源を実機制御の各ステップにどれだけ割くか」が再検討対象になる。特に接触を伴う操作で100%近い成功率を示したことは、世界モデル系の制御が探索依存から部分的に離脱できる可能性を示す一方、汎化の限界やデータ分布への依存は残る。 未確定の論点は、評価環境が示した性能が実機やより複雑な長期タスクでも維持されるかである。論文はPushT、Reacher、TwoRooms、OGBench Cube taskを挙げるが、実運用でのモデル更新頻度、必要なオフラインデータの質、接触の強いタスクでの失敗パターンはなお確認が必要だ。世界モデルの凍結を前提にした反復制御が、データの再収集や再学習をどの程度要するかも、次に見るべき点である。

なぜ重要か

探索型プランナーの高コストを、推論時のpredictor evaluations削減という形で下げられるなら、計算資源の制約が強いロボット制御で使い分けの幅が広がる。論文は、接触を含む環境でも高い成功率を示したとしており、世界モデルを使う制御が「速いが弱い」か「強いが遅い」の二択ではない可能性を示している。