日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
自動運転arXiv:2608.29005v1

カメラのみのエンドツーエンド運転のための劣化耐性ベンチマーク

A Degradation-Tolerance Benchmark for Camera-Only End-to-End Driving

シェア:XThreadsFacebookLINEはてブBluesky

カメラのみのエンドツーエンド運転モデルに対する画像劣化耐性を評価するベンチマークDriveDegradeを提案し、16種類の劣化を5段階で注入して計画性能への影響を分析した。

詳しい要約

1. どんなもの?

DriveDegradeは、カメラのみを使用するEnd-to-End (E2E) 運転モデルに対する画像劣化耐性を評価するベンチマークである。16種類の劣化ファミリーを5段階の強度で画像ローダー内に動的に注入し、15のポリシーを評価する。nuScenesとNAVSIMでのオープンループ計画、およびCARLAでのクローズドループ評価を含む。

2. 先行研究と比べてどこがすごい?

既存のCorruption-robustnessベンチマークは検出やBird's-Eye-View知覚に焦点を当てており、実際に車を運転する計画出力を評価していない。DriveDegradeは計画出力に直接焦点を当て、劣化に対するポリシーの耐性を評価する点で新しい。

3. 技術・手法の肝は?

画像ローダー内で劣化をオンザフライで注入し、16の劣化ファミリー(ぼけ、ノイズ、低照度、天候、フレーム損失、メモリ障害など)を5段階の強度で適用する。オープンループ計画をnuScenesとNAVSIMで評価し、CARLAでのクローズドループ評価も行う。さらに、画像を劣化させるものと情報を削除するものを分離し、Ego-Statusショートカットを定量化する。

4. どうやって有効だと検証した?

15のポリシーを評価し、軽度の劣化は計画にほとんど影響しないこと、ぼけ、JPEG、雨滴が計画に最もダメージを与えること、天候とビットエラーは広範囲で許容されることを示した。また、公開されているVision-Language-Actionプランナーは両軸でフラットであり、6つのカメラすべてをブラインドしても11.5%のコストしかかからないことを示した。

5. 議論はある?

フラットな曲線は曖昧であり、画像を劣化させるものと情報を削除するものを分離することで、無関心とロバスト性を混同しないようにしている。Ego-Statusショートカットの存在が示唆され、プランナーがカメラ情報を実際に使用していない可能性がある。

6. 次に読むべき論文は?

要旨で参照されている関連研究として、Corruption-robustnessベンチマーク(例:ImageNet-C)や、E2E運転モデル(例:UniAD、VAD)が挙げられる。また、Vision-Language-Actionモデル(例:GPT-4Vベースの運転モデル)も関連する。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Haohua Que, Handong Yao

分類: cs.RO

原文アブストラクト

Camera-only end-to-end (E2E) driving models are nearing deployment, where the camera stream is degraded by blur, noise, low light, weather, frame loss, and memory faults. How much a policy tolerates before its driving breaks is unclear. Corruption-robustness benchmarks target detection or bird's-eye-view perception, not the planning output that drives the car. We present DriveDegrade, a benchmark for image-degradation tolerance in camera-only E2E driving. Sixteen corruption families at five severities are injected on the fly inside the image loader, one operator reaching fifteen policies, and we evaluate open-loop planning on nuScenes and NAVSIM plus a CARLA closed-loop anchor. First, mild degradation barely affects planning, and the families that break it have a clear threshold at mid severity. Second, fragility is corruption-dependent: blur, JPEG, and raindrop damage planning most, while weather and bit error are tolerated far into the range. Third, a flat curve is ambiguous, so we separate corruptions that degrade the image from those that remove it. A planner that reads its camera must lose accuracy when information is deleted, whatever it does under quality loss. On these two axes the planners separate sharply, quantifying the ego-status shortcut without mistaking indifference for robustness. A released vision-language-action planner is flat on both axes, and blinding all six of its cameras costs it only 11.5 percent.

関連論文