日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
手術支援arXiv:2610.18422

粒子フィルタと深度対応オクルージョン処理による低侵襲手術のリアルタイム可視化拡張

Augmenting Real-time Visualization in Minimally Invasive Surgery with Particle Filtering and Depth-Aware Occlusion Handling

シェア:XThreadsFacebookLINEはてブBluesky

手術器具による遮蔽を検出し、単眼深度推定と粒子フィルタで対象領域を追跡するリアルタイム可視化フレームワークを提案。

詳しい要約

1. どんなもの?

- 低侵襲手術(MIS)におけるリアルタイム可視化を強化するハイブリッドフレームワーク。 - 手術器具による遮蔽(occlusion)と深度を考慮した追跡を目的とする。 - 拡張YOLO検出、Particle Filtering(PF)、単眼深度推定MiDaSを統合。 - 器具とROI間の距離ベース閾値で遮蔽を検出。 - リアルタイム性能38.7 FPSを達成。

2. 先行研究と比べてどこがすごい?

- 従来のMIS可視化は遮蔽や深度を同時に扱うのが困難。 - 本手法はYOLO、PF、MiDaSを組み合わせ、遮蔽検出と深度推定をリアルタイムで実現。 - 器具検出信頼度0.85、深度MAE 0.34 cm、RMSE 0.53 cmを達成。 - ファントム検証でステレオ深度と比較しMAE 0.65 cm、RMSE 0.66 cm。 - 遮蔽検出精度81.95%でリアルタイム動作。

3. 技術・手法の肝は?

- 拡張YOLOによる器具検出。 - Particle Filtering(PF)による追跡。 - MiDaSによる単眼深度推定。 - 器具とROI間の距離ベース閾値で遮蔽を検出。 - 深度情報を考慮した遮蔽処理と可視化。

4. どうやって有効だと検証した?

- 実験で器具検出信頼度0.85、深度MAE 0.34 cm、RMSE 0.53 cmを確認。 - 独立したファントムベース検証でステレオ深度測定と比較しMAE 0.65 cm、RMSE 0.66 cm。 - 遮蔽検出精度81.95%、リアルタイム性能38.7 FPSを達成。 - 外科医からの予備的フィードバックで臨床的関連性を確認。

5. 議論はある?

- 予備的な外科医フィードバックは臨床的関連性と将来の術中画像誘導ナビゲーション・意思決定支援への可能性を示唆。 - 限界や課題についての詳細な議論は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究:YOLO、Particle Filtering(PF)、MiDaS、ステレオ深度測定。 - 関連手法:単眼深度推定、遮蔽処理、リアルタイム手術可視化。 - 同分野の定番:術中画像誘導ナビゲーション、拡張現実(AR)手術。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Anuska Sarkar, Partha Acharya, Vishnu Nandury, Kaustav Basu, Subhamoy Mandal

分類: eess.IV, cs.RO

原文アブストラクト

We present a real-time, hybrid framework for occlusion handling and depth-aware tracking in minimally invasive surgeries (MIS). Occlusions caused by surgical instruments often obscure the region of interest (ROI), affecting surgical precision. To address this, our approach integrates enhanced You Only Look Once (YOLO) based detection, Particle Filtering (PF), and monocular depth estimation using Multiple Depth Estimation Accuracy with Single Network (MiDaS). Occlusion is detected using a distance-based threshold between instruments and ROI. Experimental results demonstrate robust instrument detection with a confidence score of 0.85, effective occlusion event handling, and accurate depth prediction with an MAE of 0.34 cm and RMSE of 0.53 cm. Independent phantom-based validation against stereo depth measurements yielded an MAE of 0.65 cm and RMSE of 0.66 cm. The framework further achieved an occlusion detection accuracy of 81.95\% while maintaining real-time performance at 38.7 FPS. Preliminary surgeon feedback indicates that the proposed visualization framework is clinically relevant and holds promise for future intraoperative image-guided navigation and decision support in MIS.

関連論文

PR本紙発行元 EmplifAI