医療支援/顕微鏡/自動化2026/8/11arXiv:2608.10401v1

LSTMによる視線とピペット動作解釈を用いた視野拡大顕微鏡の自動視野調整

Automatic Field-of-View Adjustment for a View-Expansive Microscope via LSTM-Based Gaze and Pipette Motion Interpretation

シェア:X Threads Facebook LINE はてブ Bluesky

ICSI手技中に作業者が行う視野調整を、LSTMモデルでピペットの位置・速度と視線から適切な視野サイズを予測して自動化し、初心者の作業時間を短縮した論文。

詳しい要約

1. どんなもの？

本論文は、顕微授精（ICSI）において、オペレータの視野（FOV）調整を自動化するAIベースの手法を提案している。提案手法は、view-expansive microscope（ガルバノミラーと高速ビジョンを用いて単一の対物レンズで広視野と高解像度画像を同時取得できる顕微鏡）と統合され、LSTMモデルがピペットの位置・速度とオペレータの視線位置をリアルタイムに解析して適切なFOVサイズを予測する。これにより、手動での対物レンズ交換や照明調整を不要にし、ICSI手技中のワークフロー中断を減らすことを目指している。

2. 先行研究と比べてどこがすごい？

従来の顕微鏡では、FOVサイズを変更するために手動での対物レンズ交換や照明調整が必要であり、ICSI中に頻繁にFOVを調整するオペレータの作業を中断させ、手技時間を増加させていた。提案手法は、view-expansive microscopeにより物理的なレンズ交換を不要にし、さらにLSTMを用いてオペレータの意図を推定して自動でFOVを調整する点が新しい。これにより、手技の中断を減らし、初心者でも熟練者と同等の作業速度を達成できる可能性を示している。

3. 技術・手法の肝は？

手法の核心は、LSTMモデルを用いたFOVサイズの予測である。入力は、ピペットの位置と速度、およびオペレータの視線位置の時系列データであり、これらをリアルタイムに解析して適切なFOVサイズを出力する。モデルは、5年以上のマイクロマニピュレーション経験を持つエキスパートのICSI手技データを用いて学習される。また、view-expansive microscopeは、ガルバノミラーと高速ビジョンによるマルチビューイメージングを利用して、単一の対物レンズで広視野と高解像度を同時に実現し、物理的なレンズ交換を不要にしている。

4. どうやって有効だと検証した？

提案システムの有効性は、初心者オペレータを対象とした実験で検証された。実験では、提案の自動FOV調整システムを使用した場合と使用しない場合でICSI手技の完了時間を比較し、平均完了時間が60.5秒から48.0秒に有意に短縮された（p < 0.001）。さらに、この改善により初心者オペレータがエキスパートと同等の作業速度を達成できることが示された。

5. 議論はある？

要旨からは、提案手法の限界や議論についての詳細は不明である。ただし、LSTMモデルの予測精度や、視線情報の取得方法、異なるオペレータや環境での汎用性などが議論の対象となる可能性がある。また、実験は初心者オペレータのみを対象としており、エキスパートへの影響や長期的な効果については言及されていない。

6. 次に読むべき論文は？

要旨で参照されている関連研究は明示されていないが、同分野の定番として、LSTMを用いた時系列予測や視線追跡を用いたヒューマン・マシンインタラクション、顕微鏡の自動化に関する研究が挙げられる。具体的には、LSTM-based gaze predictionやautomated microscopy systems、ICSI automationに関する論文が関連する。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kenta Yokoe, Takuya Hara, Tadayoshi Aoyama

分類: cs.HC, cs.LG, cs.RO, eess.IV

原文アブストラクト

Intracytoplasmic sperm injection (ICSI) operators frequently adjust the field-of-view (FOV) during procedures, which interrupts workflow and increases procedure time. Conventional microscopes require manual objective lens switching and illumination adjustments to achieve different FOV sizes. We propose an AI-based automatic FOV adjustment method integrated with a view-expansive microscope. This microscope enables the simultaneous acquisition of a large FOV and high-resolution images using a single objective lens through multiview imaging with galvanometer mirrors and high-speed vision, thereby eliminating the need for physical lens exchanges. Our method utilizes a long short-term memory (LSTM) model to predict the appropriate FOV size based on real-time analysis of the pipette's position and velocity, combined with the operator's gaze position. The AI model is trained using ICSI procedure data from an expert with over five years of micromanipulation experience. Experimental evaluation with novice operators reveals that the proposed automatic FOV adjustment system significantly improves the ICSI procedure speed, reducing the average task completion time from 60.5 to 48.0 s (p < 0.001). The experiments also demonstrate that this improvement enables novice operators to achieve ICSI working speeds equivalent to those of expert operators.

arXivで原文を読む →arXiv概要ページ

← 論文一覧