日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
群制御arXiv:2610.22322

分散型エージェント群における自己オーケストレーションの学習

Learning Self-Orchestration in Decentralized Agent Swarms

シェア:XThreadsFacebookLINEはてブBluesky

市場メカニズムに基づく入札を通じて、分散型エージェント群が行動方策と自己組織化を同時に学習するフレームワークを提案し、協調戦略やスケーラビリティの向上を示した。

詳しい要約

1. どんなもの?

本論文は、分散型エージェントスワームにおける行動方策と自己オーケストレーションを同時に学習する枠組み「market-based post-training (MPT)」を提案する。エージェントは入札を通じて参加意欲を表明し、誰が行動するか、集合的成果がどのように局所的な訓練クレジットを提供するかが決定される。中央調整エージェントなしに、個々の能力と参加パターンが共に適応する。embodied crafting、robot navigation、deep researchで評価。

2. 先行研究と比べてどこがすごい?

既存のマルチエージェントシステムは固定されたオーケストレーション構造内でエージェントを訓練し、個々の能力学習と集団行動の組織化を分離していた。MPTはこれらを統合し、中央調整エージェントなしで自己オーケストレーションを学習する点が新しい。monolithic post-trainingや代替調整戦略よりも優れることを示した。

3. 技術・手法の肝は?

MPTでは、エージェントが入札を通じて参加意欲を表明し、入札が誰が行動するかと集合的成果に基づく局所的な訓練クレジットを決定する。行動方策と入札行動を同時に学習することで、個々の能力と参加パターンが相互に適応する。中央調整エージェントを必要としない分散型の自己オーケストレーションを実現。

4. どうやって有効だと検証した?

embodied crafting、robot navigation、deep researchの3タスクで評価。monolithic post-trainingに対する利得を確認し、エージェント参加が学習と共に進化することを示した。同じpost-trained行動方策を用いて、学習された自己オーケストレーションが代替調整戦略を上回ることを確認。アブレーションで行動と入札の両方が学習から利益を得ること、学習された入札がより効果的な行動訓練信号を提供することを示した。さらに、関連タスクへの適応が速く、推論時に大規模集団で性能が向上し、エージェントドロップアウト下での性能損失が小さいことを示した。

5. 議論はある?

学習された自己オーケストレーションが再利用、スケーリング、ロバスト性をサポートすることが示唆される。ただし、具体的な限界や失敗ケース、計算コスト、スケーラビリティの詳細については要旨からは不明。

6. 次に読むべき論文は?

要旨で参照/比較されている研究として、monolithic post-training、代替調整戦略、およびembodied crafting、robot navigation、deep researchの関連手法が挙げられる。具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Guowei Xu, Zhenting Qi, Amani Kiruga, Himabindu Lakkaraju, Yilun Du

分類: cs.MA, cs.AI, cs.CL

原文アブストラクト

The capabilities of an agent swarm depend on both its individual members and how they coordinate. Yet existing multi-agent systems often train agents within fixed orchestration structures, separating the learning of individual capabilities from the organization of collective behavior. We introduce market-based post-training (MPT), a framework for jointly learning action policies and self-orchestration in decentralized agent swarms. Agents express their willingness to participate through bids, which determine who acts and how collective outcomes provide local training credit. Learning both action and bidding behavior allows individual capabilities and patterns of participation to adapt together without a central coordinating agent. We evaluate MPT on embodied crafting, robot navigation, and deep research. Results show gains over monolithic post-training and confirm that agent participation indeed evolves with learning. With the same post-trained action policies, learned self-orchestration outperforms alternative coordination strategies. Ablations show that both action and bidding benefit from learning, and that learned bids provide more effective action-training signals. Beyond the original training objectives, trained swarms adapt faster to related tasks and achieve better performance with larger populations at inference time. Larger populations also suffer smaller performance losses under agent dropout, demonstrating that learned self-orchestration supports reuse, scaling, and robustness in decentralized agent swarms. Code and trained models are available at https://github.com/Embodied-Minds-Lab/MPT.

関連論文

PR本紙発行元 EmplifAI