日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
キャリブレーションarXiv:2610.27547

外部パラメータ制御型合成によるLiDAR-カメラキャリブレーションのデータセットショートカット打破

SynCalib: Breaking Dataset Shortcuts in LiDAR-Camera Calibration via Extrinsic-Controllable Synthesis

シェア:XThreadsFacebookLINEはてブBluesky

外部パラメータを厳密に制御して合成キャリブレーションデータを生成するフレームワークを提案し、学習ベースのLiDAR-カメラキャリブレーション網の汎化性とゼロショット転移性能を大幅に向上させた。

詳しい要約

1. どんなもの?

- LiDAR-camera の online calibration を対象とした研究 - 既存の deep learning ベース data-driven calibration が抱える dataset shortcut 問題を指摘 - 外部パラメータ(extrinsic)を制御可能な合成データ生成フレームワーク SynCalib を提案 - 学習済みモデルの zero-shot transfer を実世界で検証する取り組み

2. 先行研究と比べてどこがすごい?

- 既存の学習ベース calibration は training data の extrinsic 多様性不足により dataset shortcut が生じる - ネットワークが固定の nominal extrinsic 設定に過学習し、実環境で性能劣化・汎化不良を起こす - 提案法は extrinsic 制約下で多様な合成データを生成し、この過学習を緩和 - 典型的な学習ベース calibration ネットワークの汎化性・頑健性を大幅に向上させる点が新規

3. 技術・手法の肝は?

- 既存の omnidirectional image datasets(depth ground truth 付き)を活用 - 厳密な extrinsic 制約の下で multi-modal calibration データを合成するデータ生成パイプライン - extrinsic を制御可能にすることで、training data の外部パラメータ多様性を確保 - 生成データのみで学習したモデルが実世界へ zero-shot transfer できることを狙う設計

4. どうやって有効だと検証した?

- 生成パイプラインのデータが典型的な学習ベース calibration ネットワークの汎化性と頑健性を有意に向上させることを実験で確認 - 多様な camera-LiDAR 構成で実世界評価を実施 - 合成データのみで学習したモデルの zero-shot transfer 能力を実世界で検証 - 詳細な定量結果・比較手法は要旨からは不明

5. 議論はある?

- dataset shortcut 現象の原因を training data の extrinsic 多様性不足に帰着させている - 合成データによる実世界 zero-shot transfer の有効性を示唆 - 実世界評価は多様な camera-LiDAR 構成で行うと記載 - 限界・失敗事例・計算コストなどの詳細な議論は要旨からは不明

6. 次に読むべき論文は?

- 学習ベース LiDAR-camera calibration の代表的手法(要旨では個別名の参照なし) - targetless calibration に関する既存 deep learning 研究 - omnidirectional image datasets と depth ground truth を扱うデータセット研究 - dataset shortcut / overfitting に関する機械学習の一般研究 - 具体的な参照論文は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Huihua Zhu, Shuyang Zhang, Dongqing Chen, Zhuo Yu, Jianhao Jiao, Yilong Zhu, Siyu Teng, Xiaopin Zhong, Zongze Wu

分類: cs.CV, cs.RO

原文アブストラクト

Online LiDAR-camera calibration remains a fundamental yet challenging task in the field of robotics. Recently, deep learning-based data-driven approaches have emerged, offering high-precision, targetless calibration capabilities. However, existing methods often suffer from a critical dataset shortcut phenomenon due to the lack of extrinsic diversity in their training data. Networks tend to overfit to fixed nominal extrinsic configurations, leading to severe performance degradation and poor generalization in real-world deployments. To address this limitation, we propose a highly generalizable data generation framework tailored for training LiDAR-camera calibration networks. Our framework leverages existing omnidirectional image datasets annotated with depth ground truth to synthesize multi-modal calibration data under rigorous extrinsic constraints. Extensive experiments demonstrate that the data generated by our pipeline significantly enhances the generalization and robustness of typical learning-based calibration networks. Furthermore, we conduct comprehensive real-world evaluations across various camera-LiDAR configurations, validating the zero-shot transfer capability of models trained exclusively on our synthetic data. To facilitate future research and community use, the code for data generation, the pre-trained models, and online benchmark datasets will be made publicly available.

関連論文

PR本紙発行元 EmplifAI