幾何学的事前分布を用いたオフロード環境でのゼロショット3Dセマンティックマッピングの改善
Improving Zero-shot 3D Semantic Mapping in Offroad with Geometric Priors
各セマンティッククラスに球面度・標高分布をフィットさせて幾何学的アンカーとし、視覚基盤モデルの予測と融合することで、オフロード環境でのゼロショット3Dセマンティックマッピングの精度を向上させた論文。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Eerik Alamikkotervo, Risto Ojala
分類: cs.CV
原文アブストラクト
Semantic 3D mapping is a powerful representation that enables platform agnostic mobile robot navigation in challenging offroad conditions. Current vision foundation models can accurately predict semantics zero-shot on structured scenes but performance is compromised in natural environments. On the other hand, 3D point clouds encode valuable information for discriminating semantics in scenarios where vision foundation models fail. In this work, we propose fitting a sphericity-elevation distribution for each semantic class to act as geometric anchor. Only the points with the most confident vision foundation model predictions are considered when fitting to produce high quality geometric prior distributions. The geometric prior is fused with the vision foundation model prediction to produce the final semantic mapping. The proposed prior improves SAM3 baseline by +6.3 in mIoU and +8.9 in accuracy on the RELLIS-3D dataset, and by +1.7 in mIoU and +2.1 in accuracy on the WildScenes dataset. The source code will be made public upon paper acceptance.
関連論文
- 熱・可視・LiDAR融合によるリアルタイム3Dセマンティックマッピングのためのマルチモーダル信号処理3Dセマンティックマッピング
- スマートエッジセンサネットワークによる物体レベルの3Dセマンティックマッピング3Dセマンティックマッピング
- 3Dセマンティックマッピングのための畳み込みベイズカーネル推論3Dセマンティックマッピング
