日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
オープンボキャブラリ検索/水中画像arXiv:2609.18752

QMSR: クエリ条件付きマスク単位エキスパートルーティングによる頑健なオープンボキャブラリ水中物体検索

QMSR: Query-Conditioned Mask-wise Expert Routing for Robust Open-Vocabulary Underwater Object Retrieval

シェア:XThreadsFacebookLINEはてブBluesky

水中画像検索において、クエリと候補のペアごとに最適な画像強調エキスパートと融合強度を適応的に選ぶルーティング手法を提案し、固定の強調処理より高精度を実現した。

詳しい要約

1. どんなもの?

- 水中環境でのopen-vocabulary object retrievalを対象としたフレームワークQMSRを提案。 - query-conditioned mask-wise expert routingを採用し、queryとcandidateのペアごとにpretrained UIE expertを選択。 - Raw表現とExpert表現の連続的なfusion strengthを予測し、適応的なenhancementを実現。 - 固定UIE戦略がRaw表現に劣る場合がある問題に対処。

2. 先行研究と比べてどこがすごい?

- 従来の固定UIE戦略はuniform preprocessingとして適用され、Raw表現を下回る可能性があった。 - QMSRはqueryとcandidateのペアごとにexpert選択とfusion strengthを適応的に決定。 - image-query shared routerと比較してNDCG@10を17.6%改善。 - 固定UIE戦略を一貫して上回り、held-out query categoriesでも有効。

3. 技術・手法の肝は?

- query-conditioned mask-wise expert routing framework。 - 各query-candidateペアに対しpretrained UIE expertを1つ選択し、Raw-Expert fusion strengthを連続値で予測。 - 学習時にはprivileged ranking oracleがexpert選択とfusion strengthのsupervisionを提供。 - annealed soft-routing relaxationによりhard Top-1 routing policyの最適化を促進。

4. どうやって有効だと検証した?

- NDCG@10を指標に評価。 - image-query shared routerと比較して17.6%の改善を確認。 - 固定UIE戦略を一貫して上回ることを示す。 - held-out query categoriesでも有効性を確認。

5. 議論はある?

- 固定UIE戦略がRaw表現に劣る場合があることを指摘し、uniform preprocessingの限界を議論。 - query-conditionedかつcandidate-specificなenhancement routingの有効性を主張。 - 具体的な限界や失敗事例、計算コストなどは要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究: 固定UIE戦略、image-query shared router、Raw representation。 - 関連手法: underwater image enhancement (UIE)、open-vocabulary object retrieval。 - 同分野の定番: 水中画像処理やopen-vocabulary retrievalの一般的な手法。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Fuming Zhang, Dongyue Huang, Junjie Wen, Lihua Xie

分類: cs.RO

原文アブストラクト

Open-vocabulary object retrieval remains challenging in complex underwater environments. Although underwater image enhancement (UIE) can improve visual quality, fixed UIE strategies may even underperform the Raw representation in retrieval, indicating that enhancement should not be applied as a uniform preprocessing step. To address this problem, we propose \textbf{QMSR}, a query-conditioned mask-wise expert routing framework for underwater open-vocabulary retrieval. Specifically, QMSR selects one pretrained UIE expert for each query--candidate pair and predicts a continuous Raw--Expert fusion strength, enabling adaptive enhancement while preserving useful Raw semantics. During training, a privileged ranking oracle provides expert-selection and fusion-strength supervision, while an annealed soft-routing relaxation facilitates optimization of the hard Top-1 routing policy. Experiments show that QMSR improves NDCG@10 by 17.6\% over an image--query shared router, while consistently outperforming fixed UIE strategies and remaining effective on held-out query categories. These results demonstrate the effectiveness of query-conditioned and candidate-specific enhancement routing for underwater open-vocabulary retrieval.

PR本紙発行元 EmplifAI