日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
データセット/ナビゲーションarXiv:2608.11901v1

DaViNCi: 連続動作と動的要素を備えた屋外視覚言語ナビゲーションのためのデータセット

DaViNCi: A Dataset Towards Outdoor Vision-and-Language Navigation with Continuous Actions and Dynamic Elements

シェア:XThreadsFacebookLINEはてブBluesky

屋外VLNの既存データセットは固定離散グラフに依存しており実環境との乖離があるため、連続動作と動的要素を同時に導入した初の屋外VLNデータセットDaViNCiを構築し、その課題と有用性を実験で示した。

詳しい要約

1. どんなもの?

DaViNCiは、屋外のVision-and-Language Navigation (VLN)のための新しいデータセットであり、連続的な行動と動的な要素を同時に導入した最初の屋外VLNデータセットである。エージェントは連続的な行動で屋外環境を移動し、予測不可能な動的要素に対処する必要がある。6つの異なるマップと合計6,933の軌跡を含む。

2. 先行研究と比べてどこがすごい?

既存の屋外VLNデータセットは固定された離散的なトポロジカルグラフに依存しており、急速に変化する現実世界の屋外環境と整合せず、sim-to-real転送を妨げる。DaViNCiは連続的かつ動的な要素を導入することで、より現実的な環境を提供し、この限界に対処している。

3. 技術・手法の肝は?

手法の肝は、データセットの構築方法にある。連続的な行動空間と動的な要素(例えば、移動する障害物や変化する環境条件)を組み込んだ屋外環境を設計し、VLNエージェントがそれらに対処できるようにしている。具体的な構築手法は要旨からは不明だが、6つのマップと6,933の軌跡を含む大規模なデータセットを提供している。

4. どうやって有効だと検証した?

包括的な比較実験を通じて、DaViNCiでの成功率が以前のデータセットと比較して離散環境で10%以上低下し、連続設定ではさらに大きな低下が見られることを示した。これにより、DaViNCiの挑戦性を実証した。また、行動の粒度と動的要素の影響を明らかにし、実用的価値を示した。

5. 議論はある?

要旨からは、データセットの挑戦性と実用性が強調されているが、具体的な議論(例えば、データセットの限界や将来の改善点)は明示されていない。また、動的要素の種類や連続行動の具体的な定義など、詳細は要旨からは不明である。

6. 次に読むべき論文は?

要旨で参照されている先行研究は明示されていないが、関連する分野として、既存の屋外VLNデータセット(例えば、TouchDownやRxRなど)や、連続行動を用いたVLN研究(例えば、Continuous VLN)が挙げられる。また、動的環境でのナビゲーションに関する研究も関連する。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zihao Xie, Pingrui Lai, Yitong Wu, Hua Yang

分類: cs.RO

原文アブストラクト

Vision-and-Language Navigation (VLN) has progressively expanded from indoor to outdoor environments. However, existing outdoor VLN datasets still rely on fixed discrete topological graphs for construction. It fails to align with the rapidly changing real-world outdoor environments and impedes the sim-to-real transfer of VLN agents. To address this limitation, we propose DaViNCi (\textbf{D}yn\textbf{a}mic \textbf{Vi}sion-and-Language \textbf{N}avigation in \textbf{C}ont\textbf{i}nuous Environment), the first outdoor VLN dataset that simultaneously introduces both continuous and dynamic factors. The agent not only moves in the outdoor environment using continuous actions but is also required to handle unpredictable dynamic elements. The dataset encompasses six distinct maps with a total of 6,933 trajectories. Through comprehensive comparative experiments, we find that the success rate on DaViNCi decreased by more than 10\% in discrete environments compared to previous datasets. And there is an even greater decline in continuous settings, demonstrating the challenge of DaViNCi. Furthermore, we clarify the impact of action granularity and dynamic elements. These results demonstrate the practical value of DaViNCi in advancing outdoor VLN toward more realistic environments. The website is https://xzh0312.github.io/DaViNCi/.