日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
医用画像再構成arXiv:2609.37874

EndoPrior-GS:テクスチャ事前分布を統合した動的内視鏡再構成

EndoPrior-GS: Dynamic Endoscopic Reconstruction with a Joint Texture Prior

シェア:XThreadsFacebookLINEはてブBluesky

内視鏡手術の動的環境を3Dガウシアンスプラッティングで再構成する際、ツール除去マスクや非鏡面フィルタからテクスチャ事前分布を生成し、形状と照明の乱れを抑える手法を提案。

詳しい要約

1. どんなもの?

- 動的な内視鏡再構成はロボティック手術とコンピュータ支援介入の基盤 - 3D Gaussian Splatting (3DGS) はリアルタイム描画を実現するが、変形する術中環境では偽の幾何や照明変動が問題 - EndoPrior-GS はフレームから抽出した視覚ヒューリスティクスと推定深度マップを明示的に結合する新パイプライン - ツール除去済み有効組織マスク、非鏡面フォトメトリックフィルタ、解剖学的構造顕著性から joint texture prior を導出 - 確率マップがプリミティブ初期化と密度制御を導く - 時間領域にも拡張し、学習中にペアワイズプリミティブ寄与を動的に重み付けする texture-aware 項を導入

2. 先行研究と比べてどこがすごい?

- 従来の 3DGS は変形する術中環境で偽の幾何と照明変動に制約される - EndoPrior-GS はフレーム抽出の視覚ヒューリスティクスと推定深度マップを明示的に結合 - ベンチマーク EndoNeRF と SCARED で Flow Error を代表手法比 27.7% と 25.8% 削減 - 競争力のある描画品質とリアルタイム描画速度を維持 - 要旨からは他の具体的先行研究名は不明

3. 技術・手法の肝は?

- ツール除去済み有効組織マスク、非鏡面フォトメトリックフィルタ、解剖学的構造顕著性から joint texture prior を導出 - 得られた確率マップがプリミティブ初期化と密度制御をガイド - 時間領域へ拡張し、texture-aware 項で学習中のペアワイズプリミティブ寄与を動的に重み付け - フレーム抽出の視覚ヒューリスティクスと推定深度マップを明示的に結合

4. どうやって有効だと検証した?

- ベンチマークデータセット EndoNeRF と SCARED で広範な実験 - Flow Error を代表手法比 27.7% と 25.8% 削減 - 競争力のある描画品質とリアルタイム描画速度を維持 - プロジェクトサイト: https://jiaqi-huang-77.github.io/EndoPrior-GS/

5. 議論はある?

- 要旨からは明示的な議論や限界は不明 - 偽の幾何と照明変動への対処を主張 - リアルタイム描画速度と描画品質の競争力を維持すると述べる

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究: 3D Gaussian Splatting (3DGS) - ベンチマーク: EndoNeRF, SCARED - 関連手法: 動的内視鏡再構成、変形可能シーン再構成 - 要旨からは他の具体的な次読論文は不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jiaqi Huang, Shidong Wang, Tong Xin, Kabita Adhikari

分類: cs.CV

原文アブストラクト

Dynamic endoscopic reconstruction is fundamental to robotic surgery and computer-assisted interventions. While 3D Gaussian Splatting (3DGS) realises real-time rendering, its application to deformable intraoperative environments remains constrained by spurious geometry and varying illuminations. To address these limitations, we introduce EndoPrior-GS, a novel pipeline that explicitly couples frame-extracted vision heuristics and estimated depth maps. EndoPrior-GS derives a joint texture prior from a tool-filtered valid tissue mask, a non-specular photometric filter, and anatomical structural salience, yielding a probability map that guides primitive initialisation and subsequent density control. The prior is further extended to the temporal domain through a texture-aware term that dynamically weighs pairwise primitive contributions during training. We conduct extensive experiments on benchmark datasets EndoNeRF and SCARED, and the obtained results show that our method EndoPrior-GS reduces Flow Error by 27.7% and 25.8% over the representative approaches while preserving competitive rendering quality and real-time rendering speed. Our project website is available at https://jiaqi-huang-77.github.io/EndoPrior-GS/.

関連論文

PR本紙発行元 EmplifAI