強化学習によるロボット帆船:シミュレータと予備的結果
Reinforcement-learning robotic sailboats: simulator and preliminary results
実機のロボット帆船のデジタルツインを構築し、強化学習による自律航行・制御のための仮想海洋環境を開発した。
著者: Eduardo Charles Vasconcellos, Ronald M Sampaio, André P D Araújo, Esteban Walter Gonzales Clua, Philippe Preux, Raphael Guerra, Luiz M G Gonçalves, Luis Martí, Hernan Lira, Nayat Sanchez-Pi
分類: cs.RO, cs.AI, cs.LG
原文アブストラクト
This work focuses on the main challenges and problems in developing a virtual oceanic environment reproducing real experiments using Unmanned Surface Vehicles (USV) digital twins. We introduce the key features for building virtual worlds, considering using Reinforcement Learning (RL) agents for autonomous navigation and control. With this in mind, the main problems concern the definition of the simulation equations (physics and mathematics), their effective implementation, and how to include strategies for simulated control and perception (sensors) to be used with RL. We present the modeling, implementation steps, and challenges required to create a functional digital twin based on a real robotic sailing vessel. The application is immediate for developing navigation algorithms based on RL to be applied on real boats.
関連論文
- H-SPAR: 粒子輸送と自律ロボットのための流体力学を考慮したシミュレーションsim2real
- EIDA: 実機-シミュレータ-実機ロボットナビゲーションのための実行インターフェースダイナミクス適応sim2real
- GenCOPE: ロボットピッキングのための合成から実への汎化カテゴリレベル物体姿勢推定sim2real
- LiteReality-Agent: 操作可能な3D屋内シーン再構成のためのエージェントシステムsim2real
- SimEX: シミュレーション統合型ロボティクス自動研究フレームワークsim2real
- Real-to-Simロボット評価におけるアセットとシーン再構築の効果測定sim2real