日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
マニピュレーションarXiv:2608.07600v1

AdaDexGrasp: 3D視覚触覚表現融合による適応的器用把持

AdaDexGrasp: Adaptive Dexterous Grasping via 3D Visuo-Tactile Representation Fusion

シェア:XThreadsFacebookLINEはてブBluesky

視覚と触覚を統合した表現を用いて、把持計画と接触後の適応的修正を行う器用なロボットハンドの把持フレームワークを提案し、シミュレーションと実環境で成功率と汎化性を向上させた。

詳しい要約

1. どんなもの?

本論文は、視覚と触覚の統合により、接触後の適応的な把持を実現する統一的な visuo-tactile-fusion 把持フレームワークを提案する。このフレームワークは、把持生成、実現可能性予測、適応的洗練の3つの要素で構成される。中核となるのは、触覚信号を指の識別情報と関連付けることで物体形状と触覚フィードバックを密に融合する効率的な visuo-tactile 表現であり、計画時の接触を考慮した把持姿勢生成と接触後の触覚誘導による洗練を可能にする。

2. 先行研究と比べてどこがすごい?

既存のロボット把持手法は主に視覚入力に依存し、接触後の触覚誘導による適応メカニズムが欠如しているため、ロバスト性と汎化性が限定的である。本手法は、触覚フィードバックを把持プロセスに統合し、接触後の動的調整を可能にする点で先行研究より優れている。また、触覚信号を指の識別情報と関連付ける統一表現により、細かい指と物体の相互作用を推論できる点が新しい。

3. 技術・手法の肝は?

手法の肝は、触覚信号を指の識別情報と関連付けることで物体形状と触覚フィードバックを密に融合する visuo-tactile 表現の導入である。この表現は、把持計画時の接触を考慮した把持姿勢生成と、接触後の触覚誘導による洗練を統一的な枠組みでサポートする。具体的には、把持生成、実現可能性予測、適応的洗練の3つのモジュールがこの表現を利用して連携する。

4. どうやって有効だと検証した?

シミュレーションと実環境の両方で包括的な実験を行い、多様な物体に対する把持成功率と汎化性が大幅に向上することを実証した。具体的な数値や比較対象は要旨からは不明だが、提案手法の有効性が示されている。

5. 議論はある?

要旨からは、提案手法の限界や特定の議論点は明示されていない。ただし、触覚センサの精度や実環境でのノイズ、計算コストなどの課題が考えられるが、要旨には記載がない。

6. 次に読むべき論文は?

要旨で参照または比較されている研究は明示されていないが、関連分野として visuo-tactile fusion を用いた把持研究や、接触後の適応的制御に関する論文が挙げられる。具体的には、触覚フィードバックを用いた grasp refinement や、視覚と触覚の多感覚統合に関する研究が関連する。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xirui Liang, Jiaqi Liang, Jingkai Xu, Yuran Wang, Ruochong Li, Yuanpei Chen, Masayoshi Tomizuka, Wei Zhan, Ruihai Wu

分類: cs.RO, eess.IV

原文アブストラクト

Humans achieve stable and adaptive grasps by seamlessly integrating visual perception and tactile feedback, a capability that remains challenging to replicate in robotic systems. Existing robotic grasping approaches predominantly rely on visual inputs and lack mechanisms for tactile-guided adaptation after contact, limiting robustness and generalization. To address this challenge, we propose a unified visuo-tactile-fusion grasping framework that integrates grasp generation, feasibility prediction, and adaptive refinement. At its core, our method introduces an efficient visuo-tactile representation that tightly fuses object geometry with tactile feedback by associating tactile signals with finger identities. This unified representation supports contact-aware grasp pose generation during planning and tactile-guided refinement after contact, enabling the system to reason about fine-grained finger-object interactions and adjust grasps dynamically. Comprehensive experiments in both simulation and real-world environments demonstrate that our approach significantly enhances grasp success rates and generalization across diverse objects.