日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
水中知覚/モデル適応arXiv:2610.40900

AquaProbe:水中画像向け凍結視覚モデルの効率的適応

AquaProbe: Efficient Adaptation of Frozen Vision Models for Underwater Images

シェア:XThreadsFacebookLINEはてブBluesky

水中画像におけるドメインギャップの位置を計測し、そのプロファイルに基づいてLoRAのランクを配分することで、凍結視覚モデルを効率的に水中環境へ適応させる手法を提案した。

詳しい要約

1. どんなもの?

- 水中画像に対する視覚モデルの適応手法 AquaProbe を提案する論文。 - 陸上画像で pretrained された vision model は、turbidity・backscatter・波長依存 attenuation により水中では信頼性が低下する。 - AquaProbe は「domain gap の位置が水の種類や imaging range によってどう変化するか」を測定する。 - 測定した profile に応じて固定の LoRA budget を配分する適応手法。 - 水中セグメンテーションタスクで評価。

2. 先行研究と比べてどこがすごい?

- 既存の適応手法は、adapter を encoder の深さ方向に均等配置するか、2つの固定 domain 間の divergence で層を選択していた。 - AquaProbe は層選択を固定 domain 間の divergence に頼らず、水の種類・imaging range ごとに domain gap の位置が変化することを測定する点が異なる。 - 同一パラメータ予算(0.59 million adapter parameters)で、均等な LoRA rank allocation より 1.9 mIoU ポイント良い 70.1 mIoU を達成。 - 条件クラスタに条件付けられた three-way router により、標準 SUIM split で 70.6 mIoU、held-out degradation 下の AUDRC で 63.4 を達成。

3. 技術・手法の肝は?

- 新たに導入される divergence と、frozen vision encoder を通じて蓄積される divergence を分離して測定する。 - そのために paired clean 画像と physically rendered 画像を用いる。 - 測定した profile に基づき、固定の LoRA budget を比例的に rank allocation する。 - 推定した condition cluster に条件付けられた three-way router を備える。 - 詳細な学習手順やレンダリング手法は要旨からは不明。

4. どうやって有効だと検証した?

- 水中セグメンテーションの mIoU で評価。 - 比例的な LoRA rank allocation は 70.1 mIoU で、同一の 0.59 million adapter parameters 予算の uniform LoRA rank allocation を 1.9 mIoU ポイント上回った。 - three-way router は標準 SUIM split で 70.6 mIoU。 - held-out degradation 下で AUDRC 63.4 を達成。 - 具体的なデータセット構成や比較対象の詳細は要旨からは不明。

5. 議論はある?

- 要旨からは不明。 - 測定 profile の一般性や、他の水中条件・タスクへの拡張性についての議論は要旨に記載なし。 - three-way router の condition cluster 推定誤差の影響も要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている既存手法: encoder 深さ方向に adapter を均等配置する手法、2つの固定 domain 間の divergence で層選択する手法、uniform LoRA rank allocation。 - 関連データセット/ベンチマーク: SUIM、AUDRC。 - 関連技術: LoRA、physically rendered images を用いた domain gap 測定。 - 具体的な論文名は要旨に記載がないため不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Md Shihabul Islam Shovo, Nishi Kanta Paul, Trung Dong, Xiaomin Lin

分類: cs.CV, cs.LG, cs.RO

原文アブストラクト

Reliable visual perception is essential for safe autonomous underwater exploration. Yet vision models pretrained on terrestrial images become less reliable underwater, where turbidity, backscatter, and wavelength-dependent attenuation alter scene appearance. Existing adaptation methods either spread adapters equally across the encoder depth or select layers using the divergence between two fixed domains. In this paper, we introduce AquaProbe for measuring how the location of the domain gap changes with water type and imaging range. AquaProbe separates newly introduced divergence from that accumulated through a frozen vision encoder using paired clean and physically rendered images and allocates a fixed LoRA budget according to the measured profile. The segmentation mean Intersection-over-Union (mIoU) for the proportional LoRA rank allocation, based on the measured profile, is 70.1; this is a better result than uniform LoRA rank allocation by 1.9 mIoU points while having the same parameter budget of 0.59 million adapter parameters. The three-way router, conditioned on estimated condition clusters, achieves 70.6 mIoU on the standard SUIM split and 63.4 AUDRC under held-out degradation.

PR本紙発行元 EmplifAI