RAGベースの産業用フィールドバス機器自動設定

本論文は、産業用フィールドバスデバイスの設定を自動化するパイプライン「SysName」を提案している。従来、エンジニアがPDFマニュアルから数百のプロトコル固有パラメータを手動で抽出し、監視制御システムに入力する作業を、Modbus RTU、OPC-UA、Profibus DP、CANopenに対応したエンドツーエンドの自動設定で置き換える。ハイブリッド検索、オントロジーグラフ、ローカルLLM、修復パイプライン、棄却ゲート、SHACL検証を組み合わせ、安全で高精度な設定生成を実現する。

先行研究と比べ、SysNameは実運用指向のパイプラインを提供し、複数プロトコル（Modbus RTU、OPC-UA、Profibus DP、CANopen）を統一的に扱う点が優れている。また、ECLASS、AAS、SOSA/SSNに基づくオントロジーグラフを検索に統合し、BGE-M3エンコーダとクロスエンコーダリランカーを用いたハイブリッド検索で高いHitRateを達成。さらに、二段階棄却ゲートにより安全でないLLM呼び出しをブロックし、ゼロ不安全書き込みとゼロサイレント障害を実現している点が新しい。

手法の肝は、ハイブリッド検索（密・疎）とオントロジーグラフの統合、BGE-M3エンコーダとクロスエンコーダリランカーによるパッセージ抽出、ローカルLLM（T=0.1）によるプロトコル固有プロンプトでのJSON-LD設定生成、四段階修復パイプライン、リランカースコア閾値とIRI解決率を組み合わせた二段階棄却ゲート、SHACL検証である。これにより、低品質な設定を事前にフィルタリングし、安全な自動設定を実現する。

有効性は、28件のフィールドレベルクエリからなるゴールドセットで検証。ハイブリッド検索はHitRate@10=0.96、リランカーはMRR@10を0.56から0.63に向上させ、棄却のための完全なスコア分離を達成。生成器はフィールドレベルF1=0.87、12回中9回で完全一致。エンドツーエンドでは、H100 GPUでデバイスあたり2.6〜6.6秒、5デバイスのベンチマークでゼロ不安全書き込み、ゼロサイレント障害。さらに、物理シミュレートされたUniversal Robots UR5eロボットを未変更のベンダー文書（254ページのマニュアル、8ページのレジスタリスト、496チャンク）から設定するケーススタディで、フィールドレベルF1=1.0を3回の実行で達成。アブレーション研究と5つの産業用LLMシステムとの比較も実施。

議論として、コンポーネント単位の評価により、エンドツーエンドの指標だけでは見えないOPC-UA生成における系統的な失敗が特定された点が挙げられる。また、棄却ゲートと展開検証により、失敗した実行はすべてフラグされるが、OPC-UAの失敗は改善の余地を示唆する。さらに、ローカルLLMを使用するため、クラウド依存がなく、データプライバシーに有利だが、LLMの能力に制限がある可能性も議論されている。

次に読むべき論文は、要旨で参照されているECLASS、AAS、SOSA/SSNオントロジー関連の研究、BGE-M3エンコーダやクロスエンコーダリランカーに関する情報検索の論文、および比較対象となった5つの産業用LLMシステムの論文が挙げられる。具体的には、オントロジーグラフの構築方法やLLMベースの設定生成に関する研究が関連する。