日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
リターゲティングarXiv:2610.36539

接触アンカード・リターゲティングによる巧みな操作

CARD: Contact-Anchored Retargeting for Dexterous Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

人間のデモを接触力目標ごとロボット動作に変換するフレームワークCARDを提案し、映像・モーションキャプチャ・触覚グローブを統合して接触維持率とタスク成功率を大幅に向上させた。

詳しい要約

1. どんなもの?

- CARD: Contact-Anchored Retargeting for Dexterous Manipulation という枠組み。 - 人間のデモをロボットの行動へ retargeting する手法。 - simulator と object を必要としない framework。 - video, motion capture, tactile gloves を共通の hand--contact 表現で統合。 - 運動学に加え明示的な contact force targets を生成。

2. 先行研究と比べてどこがすごい?

- 従来の teleoperation, kinesthetic teaching, wearable exoskeletons は人間が robot embodiment を通す必要があり dexterity が制約。 - 既存 retargeting は kinematics のみを変換し、contact dynamics を無視。 - CARD は contact force targets を明示的に保持。 - 結果として contact frame 維持率が kinematic 手法で <10%、object-aware 手法で 22.5% に対し 43--78%。

3. 技術・手法の肝は?

- 共通の hand--contact representation で video, motion capture, tactile gloves を統合。 - kinematics に加え明示的な contact force targets を生成。 - hardware open-loop replay 中に contact targets を維持する tactile tracking controller を導入。 - 明示的 tactile source の無い video 向けに video-to-contact model の Vid-HACO を提案。

4. どうやって有効だと検証した?

- video, glove, motion-capture data と GRAB dataset で評価。 - contact frame 維持率を kinematic / object-aware retargeting と比較。 - physics-based retargeting に組み込み、GRAB dataset で strict task success が 12% から 32% へ改善。 - tactile tracker が hardware replay 時の力再現に重要であることを示す。

5. 議論はある?

- contact preservation が人間の dexterity を robot へ移す scalable interface であると主張。 - 限界や失敗要因の詳細は要旨からは不明。 - 実機での汎化性や長期運用の議論は要旨からは不明。

6. 次に読むべき論文は?

- GRAB dataset 関連の研究。 - kinematic retargeting および object-aware retargeting の手法。 - physics-based retargeting。 - Vid-HACO の比較対象となる video-to-contact モデル。 - tactile gloves や motion capture を用いた dexterous manipulation データ収集研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Cunxi Dai, Botao He, Francois R Hogan, Wei Pan, Rao Fu, Wen-Han Hsieh, Ruoshi Liu, Jitendra Malik, Guanya Shi, Akash Sharma

分類: cs.RO

原文アブストラクト

Humans are dexterous, but traditional data collection paradigms such as teleoperation, kinesthetic teaching, and wearable exoskeletons force humans to act through the robot embodiment, bottlenecking their dexterity. Retargeting can avoid this. However, existing methods purely translate kinematics and ignore the real-world contact dynamics essential for task success. We present CARD: Contact-Anchored Retargeting for Dexterous Manipulation, a simulator and object-free framework that retargets human demonstrations to robot actions by explicitly preserving contact force targets. CARD unifies human data sources including video, motion capture, and tactile gloves via a shared hand--contact representation and generates explicit contact force targets in addition to kinematics. To maintain these contact targets during hardware open-loop replay, CARD also introduces a tactile tracking controller. For video which does not contain an explicit tactile source, we present Vid-HACO, our video-to-contact model that sets a new state of the art. Across our video, glove, motion-capture data and the GRAB dataset, CARD maintains contact on $43$--$78\%$ of contact frames, while kinematic and object-aware retargeting methods maintain contact on $<10\%$ and $22.5\%$ of the frames respectively. Further, integrating our formulation into physics-based retargeting improves strict task success from 12\% to 32\% on GRAB dataset. Finally, we show that our tactile tracker is critical to reproduce demonstrated forces during hardware replay. These results establish that contact preservation via CARD is a scalable interface for transferring human dexterity to robots.

関連論文

PR本紙発行元 EmplifAI