日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

物体ゴールナビゲーションarXiv:2611.11978

信頼度対応の意味・幾何融合によるロバスト探索と高精度ゼロショット物体ゴールナビゲーション

CSG-Nav: Confidence-Aware Semantic-Geometric Fusion for Robust Exploration and Accurate Zero-Shot Object-Goal Navigation

シェア:XThreadsFacebookLINEはてブBluesky

検出信頼度や多視点の空間的信頼度、深度による3D位置推定を融合し、幻覚による方向バイアスや誤停止を抑えたゼロショット物体ゴールナビゲーション手法を提案した論文。

詳しい要約

1. どんなもの?

- 未学習環境で対象物体を探索・到達する zero-shot object-goal navigation のためのフレームワーク CSG-Nav を提案した研究。 - confidence-aware な multimodal information fusion を中心に据え、semantic-source fusion、spatial-confidence fusion、semantic-geometric decision fusion の3機構を統合する。 - 長距離知覚の不確実性、hallucination による方向バイアス、意味的には妥当だが幾何的に誤った停止判断に対処することを狙う。

2. 先行研究と比べてどこがすごい?

- foundation-model-based 手法は汎化性を改善したが、unreliable long-range perception、hallucination-induced directional bias、semantically plausible but geometrically incorrect stopping decisions に脆弱とされる。 - CSG-Nav はこれらに対し、confidence を考慮した fusion で方向スコアの信頼性向上と物理的に接地した停止判断を目指す点が差分。 - 具体的な先行研究名や定量比較は要旨からは不明。

3. 技術・手法の肝は?

- semantic-source fusion: open-vocabulary detection 結果、detection confidence、scene observations、relational reasoning を統合し、direction-level semantic scores を信頼化して hallucination 由来の方向バイアスを抑制。 - spatial-confidence fusion: 多視点の semantic evidence を Gaussian decay function で重み付けし、遠方の不確実な観測を抑制しつつ空間的に一貫した exploration preferences を蓄積。 - semantic-geometric decision fusion: semantic target detection と depth-based 3D localization を組み合わせ、物理的に接地した stopping decisions を支援。

4. どうやって有効だと検証した?

- HM3Dv1、HM3Dv2、MP3D 上で zero-shot 性能を評価し、success rates 58.9%、71.6%、44.3% を報告。 - fusion-level ablations を実施。 - 屋内・屋外環境での real-world deployments により有効性と実用性を検証。

5. 議論はある?

- 長距離知覚の不確実性や hallucination による方向バイアス、意味的に妥当でも幾何的に誤った停止判断が課題として議論されている。 - fusion-level ablations と実環境展開から有効性・実用性が示される一方、限界や失敗事例の詳細は要旨からは不明。

6. 次に読むべき論文は?

- foundation-model-based zero-shot object-goal navigation の先行手法(具体名は要旨からは不明)。 - open-vocabulary detection を用いる zero-shot navigation 研究。 - HM3Dv1、HM3Dv2、MP3D をベンチマークとする object-goal navigation 研究。 - 関連実装として公開コード https://xr-ui.github.io/CSGNav.github.io/ を参照。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Shoubin Chen, Rui Xu, Zehao Wu, Kai Zhang, Tao Huang, Zhou Liu, Qingquan Li

分類: cs.RO

原文アブストラクト

Zero-shot object-goal navigation requires autonomous agents to explore unseen environments and locate target objects without task-specific training, posing challenges in perceptual reliability under observation uncertainty and physically grounded goal termination. Although foundation-model-based approaches improve generalization, they remain vulnerable to unreliable long-range perception, hallucination-induced directional bias, and semantically plausible but geometrically incorrect stopping decisions. To address these limitations, we propose CSG-Nav, a zero-shot navigation framework centered on confidence-aware multimodal information fusion. CSG-Nav integrates three complementary fusion mechanisms. First, semantic-source fusion integrates open-vocabulary detection results, detection confidence, scene observations, and relational reasoning to produce more reliable direction-level semantic scores and suppress hallucination-induced directional bias. Second, spatial-confidence fusion weights multi-view semantic evidence using a Gaussian decay function, suppressing unreliable distant observations while accumulating spatially consistent exploration preferences. Third, semantic-geometric decision fusion combines semantic target detection with depth-based 3D localization to support physically grounded stopping decisions. Experiments on HM3Dv1, HM3Dv2, and MP3D demonstrate competitive zero-shot performance, achieving success rates of 58.9%, 71.6%, and 44.3%. Fusion-level ablations and real-world deployments in indoor and outdoor environments further verify the effectiveness and practicality of CSG-Nav for robust navigation under uncertain perception. Code is available at https://xr-ui.github.io/CSGNav.github.io/

関連論文

  1. 1パナソニックHDら、ロボット操作AI「T-Rex」を共同開発 12タスクで平均成功率65%研究・技術
  2. 2Hugging Face、ロボット学習基盤「LeRobot v0.7.0」を公開 対話操作と大規模データ学習に対応新製品・発表
  3. 3NVIDIA、Vera CPUのエージェント処理性能を公表 x86比で速度・電力効率を比較半導体・GPU
  4. 4Agility、SPAC合併でナスダック上場資金調達
  5. 5智元、清華大学などとCELを発表 96台のロボットで群体学習を検証研究・技術
PR本紙発行元 EmplifAI