日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

物体探索arXiv:2611.07493

不在検出を備えた高速・高信頼なオープンボキャブラリ物体探索

Fast and Reliable Open-Vocabulary Object Search with Absence Detection from Robot Memory

シェア:XThreadsFacebookLINEはてブBluesky

ロボットの記憶から候補を高速検索し、視覚検証で選択する2段階構成により、対象物が存在しない場合の棄却も高精度に行える物体探索手法を提案した。

詳しい要約

1. どんなもの?

- 移動マニピュレータが家庭などの日常環境で、蓄積した観測からオンデマンドに特定物体を探すための open-vocabulary object search 手法。 - 物体の位置特定だけでなく、ナビゲーションや操作の前に目標が不在であることを確実に判定する absence detection を重視。 - 逐次 RGB 観測と pose を用い、高速な候補検索と検証付き選択を分離した two-stage architecture を提案。

2. 先行研究と比べてどこがすごい?

- 既存手法は遅い網羅的再処理や高コストな 3D 表現を必要とし、評価が recall と accuracy に偏り specificity を測っていない。 - 既存の text/visual embedding 検索システムは不在物体でほぼ棄却せず、specificity は最大 9% 程度と報告。 - 提案手法は高速検索と信頼できる不在検出を両立し、exhaustive search と同等以上の信頼性を1桁少ない detector 呼び出しで達成。

3. 技術・手法の肝は?

- 高速な candidate retrieval と verified selection を分離する two-stage architecture を採用。 - 逐次 RGB 観測と pose を入力とし、caption-based retrieval に visual verification ステップを追加。 - 検証段階で候補を選別することで、不在時の棄却(abstain)を可能にしつつ検索を高速化。

4. どうやって有効だと検証した?

- ScanNet の apartment scenes で、不在物体を多数含む設定で評価。 - 8 つの retrieval-selection 構成と exhaustive search baseline を比較。 - caption-based retrieval に visual verification を加えると、exhaustive search と同等以上の信頼性を1桁少ない detector 呼び出しで達成。 - 単一の consumer GPU でオンボード実行する実機ロボットで ScanNet スコアを再現し、リアルタイム動作を確認。

5. 議論はある?

- 既存評価が specificity を測っていない点を指摘し、不在物体への棄却能力の重要性を議論。 - 検索精度と不在検出のトレードオフ、detector 呼び出し削減の効果が焦点。 - 実機オンボードでのリアルタイム性を確認したが、詳細な限界や失敗事例は要旨からは不明。

6. 次に読むべき論文は?

- exhaustive search baseline(網羅的検索) - caption-based retrieval および visual embedding を用いた open-vocabulary object search の既存手法 - ScanNet を用いた 3D シーン理解・物体検索の関連研究 - open-vocabulary detection / retrieval の代表的手法(例: CLIP 系 embedding 検索)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Nicholas Paul, Devson Butani, Eric Martinson

分類: cs.RO

原文アブストラクト

Mobile manipulators deployed in everyday human environments, such as homes for assistive care or flexible automation, often need to locate specific objects on demand from accumulated observations. Equally important, they must reliably determine when a target is absent before committing to navigation or interaction. Existing approaches demand either slow exhaustive re-processing or expensive 3D representations, and are evaluated on recall and accuracy rather than specificity, leaving their ability to abstain on missing targets unmeasured. We find existing systems that search using text or visual embedding almost never abstain on absent objects achieving at most 9\% specificity. To support accurate search at speed, we present a two-stage architecture that decouples fast candidate retrieval from verified selection, enabling both high recall and reliable absence detection from sequential RGB observations with pose. We evaluate eight retrieval-selection configurations plus an exhaustive search baseline across ScanNet apartment scenes, including significant numbers of absent objects. Adding a visual verification step to caption-based retrieval matches or exceeds exhaustive search reliability while requiring an order of magnitude fewer detector calls. We reproduce ScanNet scores on a physical robot operating entirely on-board with a single consumer GPU running in real time.

関連論文

  1. 1中国がソフトバンクのABBロボット事業買収を阻止したとFT報道、Bloomberg伝える提携・買収
  2. 2bZ4Xの自動運転タクシー、2027年に日本で初期運行へ提携・買収
  3. 3Tesla、Optimusの予約受付を12月初旬に始める見通しと報道新製品・発表
  4. 4Agility Robotics、Churchill XIとの事業統合で約4億6500万ドルの資金調達を見込む資金調達
  5. 5イオン、物流拠点の自動化率5割量産・展開
PR本紙発行元 EmplifAI