日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
触覚/マニピュレーション/sim2realarXiv:2610.23438

目なしでも問題なし:盲目的な保定球操作における触覚の貢献

No Eyes, No Problem: What Does Touch Contribute to Blind Baoding Ball Manipulation?

シェア:XThreadsFacebookLINEはてブBluesky

視覚なしで触覚と固有感覚のみを用い、シミュレーションから実機の多指ハンドへゼロショット転移して保定球の連続回転を実現し、触覚情報の寄与と重要領域を分析した研究。

詳しい要約

1. どんなもの?

- 視覚を使わず、proprioception と binary tactile feedback のみで Shadow Dexterous Hand Lite 上での Baoding ball rotation を持続的に行うロボットマニピュレーション研究。 - RL でシミュレーション上に blind manipulation policy を学習し、実機へ zero-shot transfer することを目指す。 - 実機で 225 回連続の 180° 回転(112.5 full rotations)を約 0.36 rot/s で達成。 - tactile と proprioception のみの場合の寄与比較や、tactile が重要な手領域の特定も行う。

2. 先行研究と比べてどこがすごい?

- RL による blind manipulation policy のシミュレーション生成は先行研究で可能だったが、実機の dexterous hand への転移は contacts の変化、motion-induced tactile information drift、sim-to-real dynamics gap が障壁だった。 - 本研究は sensor-aligned で coupling-aware な embodiment、tactile calibration、新規の episodic domain randomisation により zero-shot transfer を実現。 - 実機での Baoding ball manipulation において、回転数と速度の両方で報告されている中最強の hardware result だと主張。 - sensing modality によらず、持続的な tactile-driven dexterous manipulation の新 benchmark を提示するとしている。

3. 技術・手法の肝は?

- 観測は proprioception と binary tactile feedback のみ。 - シミュレーションに sensor-aligned かつ coupling-aware な embodiment を構築。 - tactile calibration を実施。 - 新規の episodic domain randomisation として slew-rate action limits と STuck-AT Taxels を導入。 - これらを組み合わせて sim-to-real gap を橋渡しし、zero-shot transfer を狙う。

4. どうやって有効だと検証した?

- 実機 Shadow Dexterous Hand Lite 上で、視覚や object-state information なしに持続的な blind Baoding rotation を実行。 - 単一の連続 trial で 225 回連続の 180° 回転(112.5 full rotations)を約 0.36 rot/s で達成。 - tactile sensing の寄与を proprioception のみと比較評価し、tactile 情報が重要な手領域を特定。 - 回転数と速度の両面で、報告されている Baoding ball manipulation の hardware result として最強だと主張。

5. 議論はある?

- 視覚なし・object-state なしで持続回転を達成したが、要旨からは失敗事例や限界の詳細は不明。 - tactile 情報の寄与と重要領域を分析しているが、具体的な領域や定量結果は要旨からは不明。 - sim-to-real gap を bridging したと主張するが、汎化性や他タスクへの適用可能性は要旨からは不明。 - 比較対象となる既存 hardware result の詳細は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で直接参照/比較されている個別論文は不明。 - 関連手法として、RL による blind manipulation policy のシミュレーション学習、sim-to-real transfer、domain randomisation、tactile sensing を用いた dexterous manipulation の研究を次に読むべき候補として挙げる。 - 具体的な論文名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ayush Deshmukh, Nalin Agarwal, Elle Miller, Sethu Vijayakumar

分類: cs.RO

原文アブストラクト

Humans manipulate objects within their hands through touch alone with remarkable ease, but for robots, achieving sustained real-world manipulation without vision remains an open challenge. Although reinforcement learning (RL) can generate sophisticated blind manipulation policies in simulation, transferring them to a real dexterous hand remains hindered by continuously changing contacts, motion-induced tactile information drift, and the gap between simulated and physical dynamics. We study this problem through Baoding ball rotation on the Shadow Dexterous Hand Lite, using only proprioception and binary tactile feedback as observations. We achieve successful zero-shot transfer through a combination of a sensor-aligned, coupling-aware embodiment in simulation, tactile calibration, and two novel episodic domain randomisations: slew-rate action limits and STuck-AT Taxels. On the physical hand, the policy achieves sustained blind Baoding rotation, completing 225 consecutive $\mathbf{180^\circ}$ rotations (112.5 full rotations) at $\sim0.36 \;\text{rot/s}$ in a single continuous trial without any vision or object-state information. Furthermore, we evaluate the contribution of tactile sensing relative to proprioception alone and identify the hand regions where tactile information is most important. This is the strongest reported hardware result for Baoding ball manipulation in both rotation count and speed, irrespective of the sensing modality used. By effectively bridging the sim-to-real gap, our framework sets a new benchmark for sustained tactile-driven dexterous manipulation on physical hardware.

PR本紙発行元 EmplifAI