日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
世界モデルarXiv:2608.08600

人口規模にスケーラブルなマルチエージェント世界モデリング

Population-Scalable Multi-Agent World Modeling

シェア:XThreadsFacebookLINEはてブBluesky

エージェント数に依存しない共有世界状態と統一レンダリングインターフェースを導入し、推論時にエージェント数を任意に拡張できるマルチエージェント世界モデルKhoraを提案した。

詳しい要約

1. どんなもの?

本論文は、マルチエージェント環境向けのスケーラブルなWorld ModelであるKhoraを提案している。従来のWorld Modelは固定数のエージェントを前提としており、推論時のエージェント数変更が困難だった。Khoraは、共有世界状態の進化と視覚レンダリングを分離し、エージェント非依存のレンダリング機構を導入することで、再学習なしに任意の数のエージェントへの推論時拡張を可能にする。

2. 先行研究と比べてどこがすごい?

既存のマルチエージェントWorld Modelは、訓練時と推論時のエージェント数が固定であるという制約があった。Khoraは、共有世界状態に基づくクロスビュー一貫性を実現し、エージェント数に依存しないレンダリングインターフェースを導入することで、推論時のエージェント数拡張を可能にした点が新しい。また、観測ストリーム間の密な相互作用を避け、共有世界状態を介することで、クエリされるビュー数に対してほぼ線形のスケーリングを実現している。

3. 技術・手法の肝は?

Khoraの核心は、世界状態の進化と視覚レンダリングの分離にある。具体的には、エージェント数を前提としない共有世界状態を定義し、その進化をモデル化する。エージェント固有の観測は、この状態を統一されたレンダリングインターフェースでクエリすることで生成される。さらに、他のエージェント情報を組み込むための人口非依存のレンダリング機構を導入し、クロスビュー一貫性を共有世界状態によって維持する。これにより、高価なビデオ生成器内での観測ストリーム間の密な相互作用を回避している。

4. どうやって有効だと検証した?

定性的実験により、未見のエージェント数への一般化が可能であり、視覚品質とマルチエージェント一貫性を維持できることを示した。さらに、リアルタイムのインタラクティブシステムを実装し、スケーラブルなオープンワールドシミュレーションを実証した。

5. 議論はある?

要旨からは、定量的評価の詳細や、特定の環境やタスクにおける限界についての議論は不明である。また、スケーラビリティの理論的限界や、エージェント数が極端に多い場合の性能低下の可能性については言及されていない。

6. 次に読むべき論文は?

要旨で参照されている関連研究として、World Models、マルチエージェント強化学習、ビデオ予測、インタラクティブ生成などが挙げられる。具体的には、World Modelsの基礎となった論文や、マルチエージェント環境でのモデルベースアプローチに関する研究が関連する。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Renjie Zhao, Yuxiang Wu, Mingyu Zhang, Jiaxin Li, Sisi Li, Yimin Sheng, Tianxi Tan, Zhenkai Zhang, Jianyi Zhu, Yong-Lu Li

分類: cs.CV, cs.AI, cs.LG

原文アブストラクト

World models have recently achieved impressive progress in visual prediction and interactive generation, but extending them to multi-agent environments introduces a fundamental scalability challenge. Existing methods generally assume a fixed number of agents during training and inference, which ties the model to a pre-determined agent population and limits inference-time scalability. Our key insight is that cross-view consistency should arise from a shared world state whose evolution does not assume a predefined number of agents, while agent-specific observations should be generated by querying this state through a unified rendering interface. Based on this insight, we propose Khora, a scalable multi-agent world model that supports inference-time expansion to arbitrary numbers of agents without retraining. Our framework decouples world-state evolution from visual rendering and introduces a population-agnostic rendering mechanism for incorporating other agent information. This design maintains cross-view consistency through the shared world state rather than through dense interactions among observation streams inside the expensive video generator, enabling approximately linear practical scaling with the number of queried views. Qualitative experiments demonstrate that our approach generalizes to unseen numbers of agents while maintaining visual quality and multi-agent consistency. We further implement a real-time interactive system to demonstrate scalable open-world simulation.

関連論文