日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

移動操作arXiv:2611.09864

把持選択と移動操作を統合するタスク認識型把持推薦フレームワーク

Grasp-TAGS: Task-Aware Grasp Selection via Critic Distillation for Prehensile Loco-Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

大きな物体の移動操作において、複数の初期把持候補から下流タスクの成功率を予測する軽量ネットワークを強化学習のcritic蒸留で学習し、接触前に最適な把持を選ぶ手法を提案した。

詳しい要約

1. どんなもの?

- 大型物体の再配置を目的とした mobile manipulator 向けの **task-aware grasp selection** フレームワーク。 - 移動と操作を長い時間軸で協調させる **loco-manipulation** を対象とする。 - 初期 grasp の選び方が下流の操作性能を大きく左右する点に着目。 - 接触前に候補 grasp をランク付けし、下流 policy に最適な grasp を選ぶ。

2. 先行研究と比べてどこがすごい?

- 従来の model-based 手法は正確な dynamics model を要することが多い。 - learning-based 手法はその要求を緩和するが、初期 grasp を固定/所与と仮定するのが典型。 - 本研究は幾何的に安定でも下流性能が異なる点を明示し、grasp 選択自体を学習対象に。 - 固定単一 grasp や random grasp selection を上回る点が新規性。

3. 技術・手法の肝は?

- 複数の初期 grasp 設定にまたがる統一的な **PPO-based reinforcement learning** policy を訓練。 - 学習された **critic** を軽量な **grasp utility network** に distill。 - utility network は候補 grasp 設定と goal 情報のみで下流ユーティリティを予測。 - 推論時は接触前に最高予測ユーティリティの grasp を選択し、下流 policy がタスクを遂行。

4. どうやって有効だと検証した?

- 大型物体再配置の実験で評価。 - 固定単一 grasp policy および random grasp selection と比較。 - 平均成功率 **89.84%** 対 最良単一 grasp policy **79.87%**(**+9.97 percentage points**)。 - 評価した全物体で最終 orientation error も低減。 - 定性結果は supplementary webpage で公開。

5. 議論はある?

- 幾何的安定性だけでなく下流ユーティリティで grasp を選ぶ重要性を示唆。 - critic distillation により軽量な grasp ランキングが可能。 - 限界や失敗ケース、一般化範囲は要旨からは不明。 - 実機 vs シミュレーションの別、物体多様性の詳細は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で比較対象として挙げられる **model-based loco-manipulation** 手法。 - 初期 grasp を固定/所与とする **learning-based loco-manipulation** 手法。 - 基盤アルゴリズムである **PPO** と **critic distillation** 関連研究。 - 大型物体再配置の **goal-conditioned reinforcement learning** 研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xun Tu, Minghao Zou, Karthik Desingh

分類: cs.RO, cs.AI, cs.LG

原文アブストラクト

Loco-manipulation, which requires mobile manipulators to coordinate locomotion and manipulation over long horizons, is a key capability for large-object rearrangement in applications such as service robotics and warehouse automation. Despite recent progress, reliably executing these tasks remains challenging because performance depends on complex robot-object and object-environment interaction dynamics. Existing approaches address this challenge either through model-based methods, which often require accurate dynamics models, or through learning-based methods, which reduce this requirement but typically assume a fixed or predefined initial grasp. However, different geometrically stable grasps can lead to substantially different downstream manipulation performance. Therefore, we propose Grasp-TAGS, a task-aware grasp selection framework for goal-conditioned large-object rearrangement. We train a unified PPO-based reinforcement learning policy across multiple initial grasp configurations and distill the learned critic into a lightweight grasp utility network that ranks candidate grasps using only the candidate grasp configuration and goal information. At inference time, we select the grasp with the highest predicted downstream utility for the downstream policy to complete the task, before even making a contact. Experiments demonstrate that Grasp-TAGS improves rearrangement success over both fixed single-grasp policies and random grasp selection, achieving an average success rate of 89.84% compared with 79.87% for the best-performing single-grasp policies, an improvement of 9.97 percentage points. Grasp-TAGS also reduces final orientation errors across all evaluated objects. For more qualitative results, refer to the supplementary webpage: https://rpm-lab-umn.github.io/Grasp-TAGS-web-page/

関連論文

  1. 1パナソニックHDら、ロボット操作AI「T-Rex」を共同開発 12タスクで平均成功率65%研究・技術
  2. 2Hugging Face、ロボット学習基盤「LeRobot v0.7.0」を公開 対話操作と大規模データ学習に対応新製品・発表
  3. 3Agility、SPAC合併でナスダック上場資金調達
  4. 4NVIDIA、Vera CPUのエージェント処理性能を公表 x86比で速度・電力効率を比較半導体・GPU
  5. 5智元、清華大学などとCELを発表 96台のロボットで群体学習を検証研究・技術
PR本紙発行元 EmplifAI