日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
手のポーズ推定/センサarXiv:2608.24572

高性能巧緻操作キャプチャのための光ファイバセンシンググローブ

Fiber Optic Sensing Glove for High Performance Dexterous Manipulation Capture

シェア:XThreadsFacebookLINEはてブBluesky

多芯形状センシングファイバを用いた手全体のポーズ追跡グローブを開発し、オクルージョンや照明変化に強い高精度な手の動きキャプチャを実現した。

詳しい要約

1. どんなもの?

手の器用な操作中の手のポーズを捉えるための、光ファイバセンシング手袋を提案。マルチコア形状センシングファイバを用いて各ファイバの3D形状全体を捉え、新しいパイプラインで各ファイバ形状を共通の手の基準座標系に位置合わせし、新しい逆運動学ソルバーが曲線制約を用いて60Hzで全手ポーズを再構成する。

2. 先行研究と比べてどこがすごい?

視覚ベース手法はオクルージョンや照明条件に弱く、センサ付き手袋はドリフトや磁気干渉を受けやすいという問題に対し、光ファイバを用いることでオクルージョンに強く、磁気干渉も受けず、モーションキャプチャ精度に匹敵する精度を達成。

3. 技術・手法の肝は?

マルチコア形状センシングファイバで各ファイバの3D形状を取得し、ファイバ形状を手の基準座標系に位置合わせする新しいパイプラインと、曲線制約を用いた逆運動学ソルバーで手ポーズを再構成。ファイバ配線ハブの工場キャリブレーションによりユーザー間・セッション間で転送可能。

4. どうやって有効だと検証した?

5人の被験者による2時間の器用な物体操作タスクのデータセットで評価。モーションキャプチャの真値に対する平均指先位置誤差は7.2mm、工場キャリブレーション後は4.9mm。

5. 議論はある?

要旨からは、誤差の内訳や他の手法との比較、実用上の制約(例えば、手袋の耐久性や装着感)などは不明。また、キャリブレーションが一度きりでユーザー間転送可能とあるが、その詳細な条件や限界は不明。

6. 次に読むべき論文は?

要旨で参照されているモーションキャプチャやセンサ付き手袋の関連研究、および光ファイバ形状センシング技術の基礎論文。具体的には、視覚ベースのハンドポーズ推定手法(例えば、MediaPipeやOpenPose)や、従来のデータグローブ(例:CyberGlove)に関する論文が考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: J. D. Peiffer, Taylor Niehues, Li Guan, Ziyi Kou, Ergys Ristani

分類: cs.RO

原文アブストラクト

Capturing hand pose during dexterous manipulation remains difficult: vision-based methods degrade under occlusion and challenging lighting, while sensorized gloves, though occlusion-free, are prone to drift and magnetic interference and rarely match motion-capture accuracy. We introduce a fiber optic sensing glove for full hand pose tracking that targets these failure modes, using multi-core shape-sensing fibers that capture each fiber's full 3D shape rather than curvature alone. A novel pipeline registers each reconstructed fiber shape to a common hand reference frame, and a new inverse-kinematics solver reconstructs full hand pose at 60 Hz using curve constraints. Benchmarked on a 2-hour dataset of dexterous object manipulation tasks across 5 subjects, the glove achieves 7.2 mm mean fingertip position error against motion capture ground truth, reduced to 4.9 mm by a one-time factory calibration of the fiber routing hub that transfers across users and sessions. These capabilities enable high-fidelity data capture and bimanual virtual teleoperation - both essential to advancing the robotics field.