日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
ナビゲーションarXiv:2611.05129

WayTrace: 地図から言語、軌跡へとつなぐ階層型都市ナビゲーション

WayTrace: A Map-to-Language-to-Trace Hierarchy for Embodied Urban Navigation

シェア:XThreadsFacebookLINEはてブBluesky

Web地図の経路案内を言語モデルで解釈し、画像上に軌跡を描いてロボットを誘導する階層型システム。GNSSノイズに強く、実都市で1.37kmの走行を達成。

詳しい要約

1. どんなもの?

- 都市屋外での自律ロボットナビゲーションのための階層システム WayTrace を提案 - web-map の turn-by-turn directions を言語を介してロボットの motion に接続する構成 - off-the-shelf の orchestrator vision-language model が directions・satellite map・camera images を読み、一度に1つの atomic language command(例: "cross the road to the left")を発行 - onboard trace predictor がその command の経路を画像上に描き、reinforcement learning policy が追従 - 車輪脚ロボットで最大1.37 km、約1.1 m/s の実世界ミッションを遂行

2. 先行研究と比べてどこがすごい?

- point-goal navigation policies は正確な GNSS に強く依存するが、WayTrace は GNSS noise に頑健 - 多くの vision-language navigation models は屋外で短い指示の実行さえ困難だが、WayTrace は長距離ルートを扱う - 長距離シミュレーションミッションで point-goal baselines は約10倍の違反で急激に劣化する一方、WayTrace は crosswalks や sidewalks をほとんど外れない - web-map directions を言語経由でロボット動作に結びつける階層構成が特徴

3. 技術・手法の肝は?

- 階層構造: orchestrator VLM → atomic language command → trace predictor → RL tracking policy - orchestrator は off-the-shelf の vision-language model で、turn-by-turn directions・satellite map・直近の camera images を入力 - trace predictor は street-level images から自動ラベル付けした100万件超のサンプルで学習し、command ごとの経路を画像上に描画 - reinforcement learning policy が描かれた trace を追従 - 一度に1つの atomic command を発行する設計で長距離タスクを分割実行

4. どうやって有効だと検証した?

- 長距離シミュレーションミッションで GNSS noise に対する頑健性を評価 - point-goal baselines と比較し、違反数が約10倍少ないことを示す - 車輪脚ロボットに実装し、busy city centre・rural trails・university campus で最大1.37 km、約1.1 m/s の実世界ミッションを完遂 - crosswalks・staircases・construction sites への対応を実地で確認

5. 議論はある?

- 要旨からは不明(定量的な失敗事例や限界、GNSS noise 以外の外乱への議論は記述なし) - 実世界ミッションの規模・速度は示されるが、被験者数や統計的有意性は要旨からは不明 - orchestrator VLM の誤りや trace predictor の失敗時の挙動は要旨からは不明

6. 次に読むべき論文は?

- point-goal navigation policies(GNSS 依存のベースライン) - vision-language navigation models(屋外指示実行の比較対象) - 関連手法として reinforcement learning による path tracking policy - 基盤モデルとして off-the-shelf の vision-language model(orchestrator VLM) - 具体的な論文名は要旨に記載がないため、上記カテゴリの代表的研究を参照すべき

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Manthan Patel, Jonas Frey, Pascal Roth, Marco Hutter, Cesar Cadena

分類: cs.RO

原文アブストラクト

Web services provide walking directions for nearly every city, but following them reliably over long routes remains challenging for autonomous robots. Point-goal navigation policies rely heavily on accurate GNSS, while most vision-language navigation models struggle to execute even short instructions outdoors. We present WayTrace, a hierarchical system that connects web-map directions to robot motion through language. An off-the-shelf orchestrator vision-language model reads the turn-by-turn directions, a satellite map and recent camera images, and issues one atomic language command at a time, such as "cross the road to the left". An onboard trace predictor, trained on over one million automatically labelled samples from street-level images, draws the path for this command in the image, and a reinforcement learning policy tracks it. In long-range simulated missions, WayTrace remains robust to GNSS noise and rarely leaves crosswalks or sidewalks, while point-goal baselines degrade sharply with about ten times more violations. Deployed on a wheeled-legged robot, WayTrace completes real-world missions of up to 1.37 km at about 1.1 m/s through a busy city centre, rural trails and a university campus, handling crosswalks, staircases and construction sites. Project page: https://way-trace.github.io

関連論文

PR本紙発行元 EmplifAI