日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
群制御arXiv:2610.25946

コード空間でのポリシー探索によるマルチエージェント経路計画

Policy Search in Code Space for Multi-Agent Pathfinding

シェア:XThreadsFacebookLINEはてブBluesky

コーディングエージェントがシミュレーションのフィードバックと正しさの検証を頼りにアルゴリズムを反復的に提案・実装・評価・改良するワークフローを検討し、手設計や既存手法を大きく上回る経路計画ポリシーを発見した。

詳しい要約

1. どんなもの?

- 複数エージェントの協調 policy を、強化学習でも人手のアルゴリズム設計でもなく、code space 上で直接探索する枠組みの提案 - 人間が方向づける workflow で、coding agents が反復的に propose・implement・evaluate・diagnose・refine を行う - 対象は Multi-Agent Pathfinding (MAPF) で、2 つの case study を通じて有効性を検討 - 得られた policy は解釈可能性と解析可能性を保つ点を狙う

2. 先行研究と比べてどこがすごい?

- 従来は labor-intensive なアルゴリズム設計か、opaque で task-specific な reinforcement learning に依存 - 本研究は自動最適化と明示的な interpretability を両立する第三の道として code space 探索を位置づけ - 手設計の解より頑健に優れたと報告 - 2024 League of Robot Runners の難マップで、局所再現した stronger な competition entry を densest instance で 35.0% 上回る - 実倉庫シミュレーションでは calibrated な proprietary solution を throughput で 58.9% 上回る新アルゴリズム種を発見

3. 技術・手法の肝は?

- 人間が方向づける workflow の下、coding agents がコードとして policy を提案・実装・評価・診断・改良する反復ループ - 探索の指針は simulation feedback と明示的な correctness verification - 単なるパラメータ探索ではなく、アルゴリズム構造自体をコード空間で書き換える点が肝 - 発見アルゴリズムは、与えられた仮定の下で collision-free かつ有限時間で完了することを証明可能

4. どうやって有効だと検証した?

- 2 つの case study で検証 - ケース1: 2024 League of Robot Runners の難マップで 2 日間の探索を実施し、densest instance で stronger な局所再現 competition entry を 35.0% 上回り、未見マップにも汎化することを確認 - ケース2: irregular lanes・連続ロボット geometry・asynchronous motion を備えた simulated real-world warehouses で 1 週間の探索を実施し、calibrated proprietary solution を throughput で 58.9% 上回ることを確認 - 加えて、新アルゴリズムの collision-free 性と有限時間完了性を証明

5. 議論はある?

- code space 探索が、効果的かつ解析的に扱いやすい実工学解を構築する競争力ある道であると主張 - 人間が方向づける workflow である点、coding agents の性能に依存する点が前提 - 証明は『stated assumptions』の下での collision-free 性と、withdraw/replace されない accepted goal の有限時間完了性に限定 - 探索コスト(2 日/1 週間)や他タスクへの一般化可能性については要旨からは不明

6. 次に読むべき論文は?

- 2024 League of Robot Runners competition の stronger な competition entry(比較対象) - calibrated proprietary solution(比較対象の商用解法) - reinforcement learning による MAPF policy 学習の代表的研究 - coding agents による autonomous code generation / program search の代表的研究 - MAPF の古典的アルゴリズム(例: CBS, Prioritized Planning)に関する文献

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Matthias Eder, Pantelis Emmanouil, Vivek Farias, Fabian Fischer, Adam Jozefiak, Tianyi Peng, Thomas Ulz, Raphael Watschinger, Fangyu Wu, Andrew Zheng

分類: cs.RO, cs.AI

原文アブストラクト

Developing coordination policies for complex multi-agent systems relies on either labor-intensive algorithm design or opaque task-specific reinforcement learning. With recent advances in autonomous coding agents, we show that policy search directly in code space offers a compelling third path that combines automated optimization with explicit interpretability. We investigate a human-directed workflow in which coding agents iteratively propose, implement, evaluate, diagnose, and eventually refine algorithms guided by simulation feedback and explicit correctness verification. We conducted two case studies and found that this workflow robustly outperformed any manually engineered solutions. On a challenging map in the 2024 League of Robot Runners competition, a two-day search discovered a policy that exceeds the stronger locally reproduced competition entry by 35.0% on the densest instance and generalizes to unseen map instances. In simulated real-world warehouses with irregular lanes, continuous robot geometry, and asynchronous motion, a week-long search discovered an entirely new class of multi-agent pathfinding algorithm that outperforms a calibrated proprietary solution in throughput by 58.9%. Under stated assumptions, we further prove that the new algorithm is collision-free and completes, in finite time, every accepted goal that is not withdrawn or replaced. Together, the studies show that policy search in code space powered by state-of-the-art coding agents offers a highly competitive path to building real engineering solutions that are both effective and analytically tractable.

関連論文

PR本紙発行元 EmplifAI