日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

LiDAR-視覚-慣性オドメトリarXiv:2611.07463

剛体結合と時刻同期を不要にしたLiDAR-慣性-視覚オドメトリ

FREE-LIVO: Physically Decoupled Yet Tightly Coupled LiDAR-Inertial-Visual Odometry

シェア:XThreadsFacebookLINEはてブBluesky

LiDARとカメラの固定配置や時刻同期を前提とせず、生成モデルでLiDAR強度画像を作り画像特徴マッチングで対応点を得ることで、別時刻・別センサの姿勢を単一因子グラフで同時最適化する手法を提案した。

詳しい要約

1. どんなもの?

- LiDAR-Inertial-Visual Odometry (LIVO) の新手法 FREE-LIVO を提案 - LiDAR・camera・IMU の相補的な計測を統合する tightly coupled な odometry - 剛体な LiDAR-camera rig や LiDAR-camera 間の時刻同期を必要としない - 想定: modular で heterogeneous な robotic systems - 公開データセット M3DGR の6シーケンスで平均 ATE RMSE 0.45 m を達成

2. 先行研究と比べてどこがすごい?

- 既存の多くの LIVO は sensor 間の固定相対 pose と正確な時刻同期を仮定 - FREE-LIVO はその両方を不要にした点が新しい - LiDAR-camera の extrinsic parameters 未提供でも動作 - 最大 0.5 s の時刻同期誤差でも精度劣化が小さい - LiDAR と camera を別ロボットに搭載し、独立に動く sensor の軌跡を同時推定できることを実験で示す

3. 技術・手法の肝は?

- 事前学習済みの image feature matcher を用い、camera 画像と LiDAR 1 scan から generative model で生成した dense LiDAR intensity image の対応を取る - 得られた 3D point-to-pixel 対応から reprojection factors を構築 - 異なる取得時刻の LiDAR pose と camera pose を直接拘束 - これらを単一の factor graph で同時最適化 - point cloud registration、visual feature tracking、各 sensor に紐づく IMU 計測の制約と統合

4. どうやって有効だと検証した?

- 公開データセット M3DGR の6シーケンスで評価 - LiDAR-camera extrinsic parameters 未提供で平均 ATE RMSE 0.45 m - 最大 0.5 s の時刻同期誤差下で精度劣化が最小限 - LiDAR と camera を別々の robot に搭載した実験 - 独立に動く sensor の軌跡を同時推定できることを確認

5. 議論はある?

- 要旨からは不明 - 計算コスト、リアルタイム性、generative model や feature matcher への依存性、失敗ケース等の議論は記述なし

6. 次に読むべき論文は?

- 要旨で参照・比較されている研究は明示されていない - 関連手法として以下が候補 - 既存の tightly coupled LIVO 手法(LVI-SAM、R3LIVE 等の一般名) - LiDAR intensity image 生成の generative model - 事前学習済み image feature matcher(SuperPoint/SuperGlue 系の一般名) - M3DGR dataset を用いた関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Reon Tabata, Kenji Koide, Shuji Oishi, Taku Okawara, Mizuho Aoki, Aoki Takanose, Masashi Yokozuka, Jun Miura

分類: cs.RO, cs.CV

原文アブストラクト

LiDAR-Inertial-Visual Odometry (LIVO) integrates complementary LiDAR, camera, and IMU measurements to achieve robust state estimation. However, most existing methods assume a fixed relative pose and accurate time synchronization between sensors. Toward modular and heterogeneous robotic systems, this paper presents FREE-LIVO, a tightly coupled odometry method that requires neither a rigid LiDAR-camera rig nor LiDAR-camera time synchronization. The proposed method uses a pretrained image feature matcher to establish correspondences between a camera image and a dense LiDAR intensity image generated from a single LiDAR scan using a generative model. From the resulting 3D point-to-pixel correspondences, we construct reprojection factors that directly constrain LiDAR and camera poses at different acquisition times. These factors are jointly optimized in a single factor graph together with constraints from point cloud registration, visual feature tracking, and the IMU measurements associated with each sensor. On six sequences from the public M3DGR dataset, FREE-LIVO achieves an average absolute trajectory error (ATE) RMSE of 0.45 m without provided LiDAR-camera extrinsic parameters and exhibits minimal accuracy degradation under time synchronization errors of up to 0.5 s. Furthermore, experiments with the LiDAR and camera mounted on separate robots demonstrate that the method can jointly estimate the trajectories of independently moving sensors.

関連論文

  1. 1中国がソフトバンクのABBロボット事業買収を阻止したとFT報道、Bloomberg伝える提携・買収
  2. 2bZ4Xの自動運転タクシー、2027年に日本で初期運行へ提携・買収
  3. 3Tesla、Optimusの予約受付を12月初旬に始める見通しと報道新製品・発表
  4. 4Agility Robotics、Churchill XIとの事業統合で約4億6500万ドルの資金調達を見込む資金調達
  5. 5イオン、物流拠点の自動化率5割量産・展開
PR本紙発行元 EmplifAI