日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

マニピュレーションarXiv:2611.10510

ReSkill: ロボットマニピュレーションのための選択的自己改善フレームワーク

ReSkill: Selective Self-Improvement for Robot Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

物体中心のタスクグラフとスキルライブラリを用い、失敗箇所を特定して局所的に修正・検証する自己改善手法を提案。実ロボット80試行中62試行(77.5%)で成功し、修正はプログラムの約0.5%に留まることを示した。

詳しい要約

1. どんなもの?

- ロボットの compositional manipulation task における selective self-improvement framework「ReSkill」 - coding agent が instruction と skill library から object-centric task graph を構築し、node-level execution records で失敗箇所を特定 - task level では stage organization・hand-off conditions・recovery routes を、skill level では perception・motion・manipulation・verification を改訂 - 改訂候補は full-task evaluation と paired comparisons を経て採用され、検証済み skill と独立実行可能な policy として蓄積 - agent は開発時のみ関与し、deployed policy は run time に agent を呼ばず retaine…

2. 先行研究と比べてどこがすごい?

- 従来の self-improvement と異なり、改訂を capability gaps に集中させる selective な枠組み - 単なる全体再生成ではなく、node-level execution records に基づき局所的な欠陥を特定して修正 - task level と skill level の両方で改訂対象を切り分ける階層的な改善 - 改訂候補を full-task evaluation と paired comparisons で検証してから採用する点 - 具体的な先行研究との比較は要旨からは不明

3. 技術・手法の肝は?

- coding agent が instruction と skill library から object-centric task graph を構築 - node-level execution records を用いて失敗 node を特定 - task level の改訂: stage organization、hand-off conditions、recovery routes - skill level の改訂: 繰り返し失敗する perception・motion・manipulation・verification の強化 - 候補改訂に対し full-task evaluation と paired comparisons を実施し、採用可否を判断 - 採用された改訂は validated skills として蓄積され、独立実行可能な policy を形成 - 展開時は agent を呼ばず retained skills のみで実行

4. どうやって有効だと検証した?

- 同一 development set 上の RoboDojo 10 タスクで平均成功率が初期版 30.0% から最終採用プログラム 86.2% へ向上 - retained programs は recorded robustness および model-selection evaluations で 83.6% を達成 - 実世界 8 タスクで rebuilt-simulation trials は 80 試行中 72 成功、real-robot trials は 80 試行中 62 成功(77.5%) - 改訂の中央値は 3 関数のみでプログラムの約 0.5% - 後から追加したタスクの task-specific functions の 39% が既存実装を直接再利用

5. 議論はある?

- 局所的な欠陥の特定・候補変更の検証・再利用可能 skill の蓄積が compositional manipulation task の実行改善に有効であることを示唆 - 改訂が小さく抑えられ(中央値 3 関数、約 0.5%)、skill の再利用が進む点を強調 - 一方で、要旨には限界・失敗事例・計算コスト・agent 依存性などの議論は明記されていない - 詳細な議論は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明記されていない - 関連手法として self-improvement、coding agent、skill library、task graph、RoboDojo に関する研究を挙げる - 具体的な次読論文は要旨からは不明

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zheng Sun, Zhihao Li, Zhuo Li, Wenrui Liu, Xin Wang, Fei Chen

分類: cs.RO

原文アブストラクト

Self-improvement on compositional manipulation tasks requires deciding what to reuse, where to improve, and which changes to retain. We present ReSkill, a selective self-improvement framework that concentrates revision on capability gaps. A coding agent constructs an object-centric task graph from an instruction and a skill library, then uses node-level execution records to locate failures. At the task level, it revises stage organization, hand-off conditions, and recovery routes; at the skill level, it strengthens perception, motion, manipulation, and verification capabilities that repeatedly fail. Candidate revisions undergo full-task evaluation and paired comparisons before adoption, allowing local changes to accumulate into validated skills and an independently executable policy. The agent participates only during development; the deployed policy calls the retained skills without invoking the agent at run time. On the same development set, average success across ten RoboDojo tasks rises from 30.0% for the initial versions to 86.2% for the final adopted programs; retained programs achieve 83.6% in recorded robustness and model-selection evaluations. Across eight real-world tasks, ReSkill succeeds in 72 of 80 rebuilt-simulation trials and 62 of 80 real-robot trials (77.5%). The median revision changes only three functions, approximately 0.5% of a program, while 39% of task-specific functions in later-added tasks directly reuse existing implementations. These results show how locating local deficiencies, validating candidate changes, and accumulating reusable skills can improve execution of compositional manipulation tasks.

関連論文

  1. 1パナソニックHDら、ロボット操作AI「T-Rex」を共同開発 12タスクで平均成功率65%研究・技術
  2. 2Hugging Face、ロボット学習基盤「LeRobot v0.7.0」を公開 対話操作と大規模データ学習に対応新製品・発表
  3. 3NVIDIA、Vera CPUのエージェント処理性能を公表 x86比で速度・電力効率を比較半導体・GPU
  4. 4Agility、SPAC合併でナスダック上場資金調達
  5. 5智元、清華大学などとCELを発表 96台のロボットで群体学習を検証研究・技術
PR本紙発行元 EmplifAI