日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
sim2realarXiv:2610.12202

システム同定を用いたASVのSim-to-Real強化学習

Sim-to-Real RL for ASVs using SysID

シェア:XThreadsFacebookLINEはてブBluesky

未知の車両ダイナミクスから始めて、CADモデルと短い実海域軌跡のみで流体力学・スラスタパラメータを推定し、強化学習方策を訓練するASVシミュレータとパイプラインを提案。BlueBoatでの実機実験で経路追従と定点保持のゼロショットsim-to-real転移に成功した。

詳しい要約

1. どんなもの?

- ASVの制御ポリシーをRLで学習するためのシミュレータとパイプラインを提案。 - 未知の車両ダイナミクスから出発し、CADモデルと短いオープンウォーターの実フィールド軌跡のみを用いて、流体力学的パラメータとスラスタパラメータを近似・洗練する。 - BlueBoat ASVでの実世界展開で、事前の流体力学的・プロペラ情報なしに、path followingとstation keepingタスクでゼロショットsim-to-real転移に成功。

2. 先行研究と比べてどこがすごい?

- 既存のASVシミュレータはRL学習のための並列環境をほとんどサポートしていない。 - 既存手法では、sim-to-realギャップに対処するためにCFDソルバーや曳航水槽試験による正確な流体力学的モデリングが必要。 - 提案フレームワークは、そのような高価なモデリングを必要とせず、CADモデルと短い実軌跡のみでパラメータを推定する点が優れている。

3. 技術・手法の肝は?

- ASVシミュレータと付随するパイプラインを開発。 - 未知の車両ダイナミクスから開始し、CADモデルと短いオープンウォーターの実フィールド軌跡を用いて、流体力学的パラメータとスラスタパラメータを近似・洗練する。 - 具体的なアルゴリズム(SysIDの詳細)は要旨からは不明。

4. どうやって有効だと検証した?

- BlueBoat ASVを用いた実世界展開を実施。 - path followingとstation keepingタスクにおいて、事前の流体力学的・プロペラ情報なしにゼロショットsim-to-real転移が成功したことを実証。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 同分野の関連手法として、CFDソルバー、曳航水槽試験、既存のASVシミュレータ、sim-to-real転移に関する研究が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Cody Sheltraw, Tsimafei Lazouski, Maani Ghaffari, Alan Papalia

分類: cs.RO

原文アブストラクト

Autonomous Surface Vehicles (ASVs) operating in dynamic marine environments require robust control policies for tasks such as path following and station keeping, making reinforcement learning (RL) a promising alternative to classical controllers. However, existing ASV simulators rarely support parallel environments for RL training. Such existing simulators require accurate hydrodynamic modeling from computational fluid dynamics solvers or towing tank tests for setting hydrodynamic parameters to address the sim-to-real gap. To address these challenges, we present an ASV simulator and accompanying pipeline that enables training policies starting from unknown vehicle dynamics. Our framework uses only a CAD model and brief set of open-water field trajectories for approximating and refining both hydrodynamic and thruster parameters. Real-world deployments on a BlueBoat ASV demonstrate successful zero-shot sim-to-real transfer in path following and station-keeping tasks without prior hydrodynamic and propeller information.

関連論文

PR本紙発行元 EmplifAI