日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
マニピュレーションarXiv:2610.18194

ロボットマニピュレーションのための身体性を超えたアフォーダンス転移

Cross-Embodiment Affordance Transfer for Robotic Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

人間のアフォーダンス注釈をロボットの物理的制約に基づいてロボットが実行可能なアフォーダンス予測に変換するフレームワークを提案し、UR5eロボットアームでの評価で有効性を示した。

詳しい要約

1. どんなもの?

- ロボットマニピュレーションのためのフレームワーク。 - 人間のアフォーダンス注釈をロボットの物理的制約に基づいて変換。 - 3D点群とロボット記述子から実行可能な表面領域を予測。

2. 先行研究と比べてどこがすごい?

- 従来は人間注釈のアフォーダンスをそのまま使用。 - ロボットの物理的制約を考慮せず、実行不可能な領域も含まれる問題。 - 本手法はロボット情報を条件に加え、実行可能性を予測。

3. 技術・手法の肝は?

- ネットワークは3D点群とロボットの幾何・制約をエンコードした記述子を入力。 - 人間注釈とシミュレーションでの複数試行の実行結果を用いて訓練。 - 実行結果がロボットにとって実行可能な領域を決定。

4. どうやって有効だと検証した?

- 家庭用品データセットで評価。 - UR5eロボットアームに2種類の平行グリッパを搭載。 - ロボット情報を与えないモデルより優れた性能を確認。

5. 議論はある?

- アフォーダンス予測はロボットに条件付けられる必要がある。 - 人間注釈だけではロボット実行可能な表現の学習に不十分。 - ロボットの物理的制約の明示的な考慮が重要。

6. 次に読むべき論文は?

- 要旨からは不明。関連手法としてhuman-annotated affordancesやparallel-jaw gripper、UR5eが挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Sawera Yaseen, Serge Thill, Rekha Raja

分類: cs.RO

原文アブストラクト

Robotic manipulation systems commonly learn object affordances from human-annotated datasets, which reflect interaction possibilities for a human hand rather than the physical constraints of a specific robot. For example, a surface region of an object identified as graspable by a human annotator may be geometrically unreachable or mechanically infeasible for a robot, yet this mismatch is rarely addressed explicitly. To tackle this challenge, we proposed a framework that translates human affordance annotations into robot-executable affordance predictions conditioned on the physical properties of the robot. The network predicts which surface regions of an object are physically executable by the robot, given a 3D point cloud of an object and a descriptor encoding the robot's geometry and constraints. The model was trained using human-annotated affordances together with robotic execution outcomes from multiple sampled approach trials in simulation, where execution outcomes determined which regions are executable for the robot. The evaluation was performed on a household objects dataset using two parallel-jaw gripper configurations on a UR5e robot arm. The framework outperformed a model that does not receive information about the robot. The experimental results demonstrated that affordance prediction must be conditioned on the robot and that human annotations alone are insufficient for learning robot-executable affordance representations.

関連論文

PR本紙発行元 EmplifAI