DexPort：巧みなハンドのデータ収集のための携帯型スキルインターフェース
DexPort: A Hand-Held Skill Interface for Dexterous Hand Data Collection
同じハンドハードウェアを収集と展開の両方に用い、少数のスキル選択で指関節を協調させて高自由度ハンドの実演データを収集する携帯型インターフェースを提案し、行動クローニングで視覚運動方策を学習した。
詳しい要約
1. どんなもの？
2. 先行研究と比べてどこがすごい？
3. 技術・手法の肝は？
4. どうやって有効だと検証した？
5. 議論はある？
6. 次に読むべき論文は？
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Amber Xie, Jiawei Fu, Xiaofeng Guo, Carmelo Sferrazza, Guanya Shi, Haozhi Qi
分類: cs.RO, cs.AI, cs.LG
原文アブストラクト
Collecting high-quality demonstrations remains a central bottleneck for learning dexterous manipulation. Teleoperation records executable robot actions, but it requires a complete robot setup and places the burden of coordinating many finger joints on the operator. Human demonstrations are easier to collect, but their motions must be estimated and retargeted to the robot, and they do not directly provide robot actions. In this paper, we introduce DexPort, a portable data-collection interface for high-DoF robot hands. It uses the same hand hardware for collection and deployment, avoiding a hand embodiment gap, and records both commanded joint targets and measured joint states. Our key observation is that a small set of skills can support a wide range of dexterous tasks. During collection, the operator moves the hand-held interface to specify the robot wrist motion and selects or adjusts skills that coordinate the finger motion. This removes the need to control each joint independently while retaining behaviors such as precise grasping and in-hand manipulation. We collect demonstrations across several real-world tasks and in unstructured environments without a robot arm. We then use behavior cloning to train visuomotor policies directly on the recorded wrist motions and hand commands, without skill labels. We evaluate across 4 tasks: pick-and-place with diverse objects, screwing with in-hand tool use, drawer stowage which requires simultaneous grasp and pulling, and a bimanual scanning task. We collect over 2,500 demonstrations with our portable device, in both laboratory and in-the-wild settings. Across our tasks, we see an improvement from 11% to 64% when using recorded robot commands instead of states, and an improvement from 36% to 78% for task success when using in-the-wild data.
関連論文
- 再利用可能な行動プリミティブを学習するロボット操作手法RoboCodeマニピュレーション
- 密着型ウェアラブル装着のための幾何認識強化学習マニピュレーション
- FORCA：接触を伴うロボットマニピュレーションのための力覚対応コーディングエージェントマニピュレーション
- TEAR: ロボットマニピュレーションのためのタスク証拠に基づく制御権限ルーティングマニピュレーション
- 低自由度ハンドのための支持面を活用した不規則物体の固定把持合成マニピュレーション
- DeXplicit: 巧みな操作の世界モデルで物理状態を明示的に表現する手法マニピュレーション