日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
マニピュレーションarXiv:2609.10137

片手で二部品を組み立てるイン・ハンド・アセンブリ

Assembling Two Parts in One Hand

シェア:XThreadsFacebookLINEはてブBluesky

2つの剛体部品を片手だけで把持・位置合わせして組み立てるタスクを強化学習で解き、シミュレーション学習から実機へゼロショット転移を実現した。

詳しい要約

1. どんなもの?

本論文は、単一の多指ハンド内で2つの剛体部品を組み付けるin-hand assemblyを扱う。第2アームや固定具を使わず、指同士の協調(異なる指が異なる役割を担う)を要する。強化学習の統一フレームワークを提案し、Bottle、Syringe、Markerの3タスクを同一レシピで解く。シミュレーションのみで訓練し、単一カメラ搭載ハードウェアへzero-shot転移させる。

2. 先行研究と比べてどこがすごい?

従来のin-hand manipulationやassemblyは、第2アームや固定具、または単純な把持を前提とすることが多い。本研究は、単一ハンド内で2部品を組み付けるfinger-level coordinationを対象とし、追加アームやfixtureなしで実現する点が新しい。また、同一の学習レシピで複数タスクを解き、シミュレーションから実機へzero-shot転移できる点を主張する。

3. 技術・手法の肝は?

2部品間のgoal relative poseを目標とした強化学習定式化。指協調を促すfunction-based auxiliary rewardと、単一のhuman reference poseへのregularizationを用いる。domain randomizationと、historical proprioceptionとobject observationのfusionにより、occlusion由来の推定ノイズへの頑健性を付与する。

4. どうやって有効だと検証した?

Bottle、Syringe、Markerの3つのassemblyタスクで同一レシピが機能することを確認。シミュレーションのみで訓練したpolicyを、単一カメラを備えた実機へzero-shot転移し、occlusionによるstate-estimation誤差に対する頑健性を示す。動画とコードは公開URLで提供。

5. 議論はある?

in-hand assemblyはhand morphologyへの要求が高く、現代のロボットハンドシステムのbenchmarkになり得ると述べる。occlusion-induced estimation noiseへの対処や、シミュレーションから実機へのzero-shot転移の頑健性が議論の中心。ただし、失敗事例や限界、他のハンド形態への一般性については要旨からは不明。

6. 次に読むべき論文は?

要旨で参照・比較されている個別研究は明示されていない。関連手法として、in-hand manipulation、dexterous manipulation、reinforcement learning、domain randomization、sim-to-real transfer、human reference pose regularization、occlusion-robust state estimationなどの定番文献を次に読むべき。具体名は要旨からは不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Liuao Pei, Tianyue Wu, Hui Zhang, Ping Luo, Jie Song

分類: cs.RO

原文アブストラクト

A hallmark of human dexterity is the cooperative use of fingers, where different fingers take on distinct yet coordinated roles to accomplish fine manipu- lation, such as capping a pen with the hand that holds it. We study this finger-level coordination through in-hand assembly: mating two rigid objects within a single dexterous hand, with no second arm and no fixture. We present a reinforcement learning formulation to solve this problem in a unified framework, which is driven by a goal relative pose between the two parts. Finger coordination is shaped by a function-based auxiliary reward and regularized toward a single human reference pose, while domain randomization and a fusion of historical proprioception and object observation confer robustness to occlusion-induced estimation noise. The same recipe solves three different assembly tasks (Bottle, Syringe, and Marker). Trained purely in simulation, the policies transfer zero-shot to hardware with a single camera, demonstrating robustness to state-estimation errors caused by oc- clusion. Our experiments also reveal that in-hand assembly places demands on hand morphology and can serve as a benchmark for modern robotic hand systems. Videos and code are available at https://ltbgbird.github.io/in-hand-assembly-page/.

関連論文