日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
遠隔操作arXiv:2610.11657

YOCO: 一度のキャリブレーションで高精度な遠隔操作を実現する高速モーションキャプチャ校正

YOCO: You Only Calibrate Once! Fast Mocap Calibration for Dexterous Teleoperation

シェア:XThreadsFacebookLINEはてブBluesky

少数のペアデータから手の姿勢推定のバイアスを補正する、微調整不要の高速キャリブレーション手法を提案し、遠隔操作の性能を向上させた。

詳しい要約

1. どんなもの?

- 低コストのmotion-capture gloveやmarkerless trackerのバイアスを補正する、few-shotかつfine-tuning不要のキャリブレーション枠組みYOCOを提案。 - 少数のraw-targetポーズペアから、凍結したMANO hand-estimation moduleに対するLoRA-style更新をHyperNetで予測。 - ユーザ・グローブ装着・セッションごとのキャリブレーションを軽量なfeed-forward適応に変換。

2. 先行研究と比べてどこがすごい?

- 従来は操作者やセッションごとに別モデルを最適化する必要があったが、YOCOはHyperNetで条件付けし一度のキャリブレーションで適応。 - MANOの幾何学的priorとコンパクトestimatorの効率を保持しつつ、バイアスを補正。 - 未キャリブレーション入力や標準キャリブレーションベースラインより、キャリブレーション効率・手状態推定品質・teleoperation性能を改善。

3. 技術・手法の肝は?

- 少数のpaired raw and target posesを入力とし、calibration HyperNetが凍結MANOモジュール用のLoRA-style更新を予測。 - fine-tuning不要のfew-shotキャリブレーションを実現。 - 合成drift augmentationをInterHand2.6Mに適用して学習。

4. どうやって有効だと検証した?

- 合成driftを加えたInterHandシーケンス、オフライン実グローブデータ、dexterous teleoperationタスクで評価。 - 未キャリブレーション入力および標準キャリブレーションベースラインと比較し、キャリブレーション効率、手状態推定品質、teleoperation性能の改善を確認。

5. 議論はある?

- 要旨からは不明。

6. 次に読むべき論文は?

- MANO、InterHand2.6M、LoRA、HyperNet、dexterous teleoperationに関する関連研究。 - 具体的な参照論文は要旨に明記されていないため、同分野の定番としてMANOやInterHand2.6Mを挙げる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yu Zhang, Yunqi Li, Yushi Du, Yi Ma, Yanchao Yang

分類: cs.RO

原文アブストラクト

Dexterous teleoperation requires reliable human-hand state estimations. However, common low-cost motion-capture gloves and markerless trackers often exhibit biases that vary across users, glove fit, and recording sessions, degrading retargeting and demonstration quality. We present YOCO, a fast few-shot, fine-tuning-free calibration framework that corrects biased hand-pose streams from a small set of paired raw and target poses. Instead of optimizing a separate model for every operator or session, YOCO conditions a calibration HyperNet on the paired examples and predicts LoRA-style updates for a frozen MANO hand-estimation module, turning per-user calibration into a lightweight feed-forward adaptation step while preserving the geometric prior of MANO and the efficiency of a compact estimator. We train YOCO with synthetic drift augmentations on InterHand2.6M and evaluate on augmented InterHand sequences, offline real glove data, and dexterous teleoperation tasks. Across these settings, YOCO improves calibration efficiency, hand-state estimation quality and teleoperation performance compared with uncalibrated input and standard calibration baselines.

関連論文

PR本紙発行元 EmplifAI