日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
群制御arXiv:2609.17265

一度のキャリブレーションでどんなチームでも飛行可能:残差補正に基づく低忠実度訓練による協調ドローン群制御

Calibrate Once, Fly Any Team: Residual-Grounded Low-Fidelity Training for Cooperative Drone Swarms

シェア:XThreadsFacebookLINEはてブBluesky

高忠実度シミュレータでの強化学習を不要にし、低忠実度シミュレータを1機のキャリブレーション飛行で補正して、チーム規模に依存しない協調ドローン群ポリシーを訓練する手法を提案。

詳しい要約

1. どんなもの?

高忠実度(HF)剛体物理での強化学習を不要にし、低忠実度(LF)点質量シミュレータで訓練した単一の分散協調ドローン群ポリシーを、少数の校正飛行で補正する混合忠実度訓練手法。チーム規模3〜18の4協調タスクで評価。

2. 先行研究と比べてどこがすごい?

HF強化学習は計算コストがチーム規模に伴い急増し衝突率も高い。提案法はHF強化学習を完全に排除し、校正は単一ドローンで済むためデータ収集コストがチーム規模で増えない。未補正LFやスクラッチHFを上回り、HF微調整に迫る性能を大幅低コストで達成。

3. 技術・手法の肝は?

完全微分可能なJAXネイティブLF点質量シミュレータ内で単一の共有分散ポリシーを最適化。HFシミュレータでの短い校正飛行により、エージェントごとのbagged residual ensembleを一度だけオフラインで適合しLFを補正。参照軌道は既存LF専用ポリシーのロールアウトで生成し、HFでは訓練不要のPDコントローラで追従。

4. どうやって有効だと検証した?

4つの協調ドローンタスクとチーム規模3〜18で評価。残差補正ポリシーは全組み合わせで未補正LFを上回り、24組み合わせ中22でスクラッチHFを上回った。HF微調整には及ばないが差はチーム規模とともに縮小し、大規模ではほぼ同等性能を低コストで達成しHF訓練特有の高衝突率を回避。

5. 議論はある?

HF微調整ポリシーとの性能差は残るがチーム規模増加で縮小。計算コスト削減と衝突率回避の利点。校正は単一ドローンで済みスケールする。限界や一般化範囲は要旨からは不明。

6. 次に読むべき論文は?

要旨で参照/比較されているHF強化学習、LF専用ポリシー、HF微調整ポリシー、PDコントローラ、bagged residual ensemble、JAXネイティブ点質量シミュレータ。関連する混合忠実度・sim-to-real・マルチエージェント強化学習の定番研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Maxim Mednikov, Oren Gal

分類: cs.MA, cs.RO

原文アブストラクト

Training multi-agent drone-swarm policies directly in high-fidelity (HF) rigid-body physics is accurate but computationally expensive. This cost scales poorly with team size, as each additional agent multiplies contact-resolution complexity and sharply raises the in-simulation crash rate. To address this, we propose a mixed-fidelity training scheme that eliminates HF reinforcement learning entirely. A single shared, decentralized policy is optimized inside a fully-differentiable, JAX-native low-fidelity (LF) point-mass simulator. The simulator is corrected by a small, per-agent bagged residual ensemble fit once, offline, using short calibration flights in the HF simulator. Because calibration requires only one isolated drone, the data collection budget does not compound with team size. Reference trajectories are generated by rolling out an existing LF-only policy and tracked in the HF simulator by a zero-training PD controller. Evaluated across four cooperative drone tasks and team sizes from 3 to 18, the residual-corrected policy outperforms an uncorrected LF baseline in all combinations, and a from-scratch HF policy in 22 of 24 combinations tested. It trails an HF-finetuned policy by a margin that narrows steadily with team size. Ultimately, the proposed method achieves near-equivalent performance at the largest team sizes at a fraction of the computational cost, completely avoiding the high crash rates typical of HF training.

関連論文