日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
sim2realarXiv:2610.28432

屋内物流のためのフィジカルAI:産業用移動ロボットにおけるCosmos拡張COMPASSナビゲーションのNVIDIA sim-to-realエコシステムのベンチマーク

Physical AI for Intralogistics: Benchmarking the NVIDIA Sim-to-Real Ecosystem for Cosmos-Enhanced COMPASS Navigation on Industrial Mobile Robots

シェア:XThreadsFacebookLINEはてブBluesky

NVIDIAのX-MobilityとCOMPASSを用い、デジタルツインとCosmosによるsim-to-real拡張で学習したナビゲーション方策を実機の産業用ロボットに展開し、成功率・効率・安全性などで既存スタックと比較評価した。

詳しい要約

1. どんなもの?

- NVIDIA の X-Mobility と COMPASS ワークフローを用い、Idealworks の産業用移動ロボット向けに学習ベース navigation policy を訓練する取り組みの系統的評価 - simulation では COMPASS benchmark を 2 つの embodiment(differential-drive の iw.hub と omnidirectional の Humanoid Mobile Platform (HMP))および Idealworks R&D center の digital twin で拡張 - real world では digital twin 由来データで X-Mobility を fine-tune し、NVIDIA Cosmos による sim-to-real variant の有無を比較、COMPASS を digital twin で一から訓練し iw.hub の onboard Jetson AGX Xavier に配備 - Idealworks R&D center で task success・eff…

2. 先行研究と比べてどこがすごい?

- 学習ベース navigation は各 embodiment や施設ごとに simulation で fine-tune する方針だが、実産業ロボットでの信頼性は系統的に検証されていなかった - 本研究は NVIDIA の X-Mobility/COMPASS workflow を実機 iw.hub に展開し、実施設で評価 - COMPASS を NVIDIA 環境のみで訓練した場合および既存 Idealworks navigation stack と比較 - digital twin 訓練と Cosmos sim-to-real augmentation の効果を実測

3. 技術・手法の肝は?

- simulation 側で COMPASS benchmark を iw.hub・HMP・R&D center digital twin に拡張 - digital twin データで X-Mobility を fine-tune し、NVIDIA Cosmos で sim-to-real variant を生成する条件としない条件を用意 - その上に COMPASS を digital twin で from scratch 訓練 - 得られた policy を iw.hub の onboard Jetson AGX Xavier に配備 - 静的 scenario を digital-twin replica と実施設の両方で実行し sim-to-real gap を測定

4. どうやって有効だと検証した?

- Idealworks R&D center の実施設で iw.hub 上に配備し、task success・efficiency・safety・smoothness・onboard compute を benchmark - 各静的 scenario を digital-twin replica と実施設の双方で実行し sim-to-real gap を評価 - digital twin + Cosmos sim-to-real augmentation により実世界 success rate が 65.3% から 91.7% へ向上(4 scenario) - simulation のみの訓練と比べ weighted travel time をほぼ半減、production navigation stack との差は 8.3 points 以内、fully onboard - integrated global planner により遠方・occluded goal にも全 trial で到達

5. 議論はある?

- 学習ベース navigation の実機信頼性を digital twin と Cosmos augmentation がどこまで担保できるかを sim-to-real gap の実測で議論 - production navigation stack との性能差(success rate で 8.3 points)や onboard compute 制約が残課題として示唆 - 対象は Idealworks の iw.hub と限られた scenario・施設であり、他 embodiment や site への一般化は要旨からは不明 - safety・smoothness の詳細な結果は要旨からは不明

6. 次に読むべき論文は?

- COMPASS benchmark(NVIDIA の学習ベース navigation 評価基盤) - NVIDIA X-Mobility(sim-to-real 向け navigation 学習 workflow) - NVIDIA Cosmos(sim-to-real variant 生成に用いる基盤モデル) - Idealworks の既存 navigation stack(比較対象の classical/production stack) - differential-drive および omnidirectional 移動ロボット向け learning-based navigation の関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Charbel Abi Hana, Rayan Zaitouni, Kameel Amareen, Mohamad Mostafa, Hasan Sayour, Wei Liu, Yan Chang, Mihir Acharya, Anthony Rizk

分類: cs.RO

原文アブストラクト

Classical robot navigation stacks are reliable but often require re-engineering for each new robot type and site. Learning-based navigation shifts this effort from hand-tuned parameters to data generation and training, where a policy adapts to each new embodiment or facility by fine-tuning in simulation. Whether policies adapted this way stay reliable on real industrial robots has seen little systematic testing. We study this for NVIDIA's X-Mobility and COMPASS workflow for training learned navigation policies on Idealworks robots. In simulation, we extend the COMPASS benchmark with two embodiments, the differential-drive iw.hub and an omnidirectional Humanoid Mobile Platform (HMP), and with a digital twin of the Idealworks R&D center. For the real world, we fine-tune X-Mobility on data from this digital twin, with and without sim-to-real variants generated by NVIDIA Cosmos, train COMPASS on top of it from scratch in the digital twin, deploy the resulting policies on the iw.hub's onboard Jetson AGX Xavier, and benchmark them in the Idealworks R&D center against COMPASS trained only on NVIDIA's environments and the existing Idealworks navigation stack on task success, efficiency, safety, smoothness and onboard compute. Running every static scenario both in a digital-twin replica and in the real facility measures the sim-to-real gap and how far Cosmos-augmented data closes it. Training in the digital twin with Cosmos sim-to-real augmentation raises the real-world success rate of learned navigation from 65.3% to 91.7% across four scenarios and nearly halves its weighted travel time compared with simulation-only training, bringing it within 8.3 points of the production navigation stack, fully onboard; with an integrated global planner, it also reaches far, occluded goals in every trial.

関連論文

PR本紙発行元 EmplifAI