arXiv論文「Skill2Real」、ゼロショットのシム・ツー・リアル操作学習を提案

何が起きたか

arXivは2026-10-02、論文「Skill2Real: Agentic Skill Learning for Zero-Shot Sim-to-Real Robot Manipulation」を公開した。論文は、共通のアプリケーション・プログラミング・インターフェース（API）を通じて、シミュレーションで学んだロボット技能を実機へ転移する枠組みを提案している。著者らは、Proposer-Verifier-Governor（PVG）ループ、CerebellumとBrainの二段階構成を使い、タスク政策の微調整や技能メモリ更新なしに実機へ持ち込めるとしている。

詳細

論文では、Cerebellumが局所的な操作技能を先に獲得し、その後にBrainがCerebellumを固定したままタスクレベルの構成を学ぶ構成を採る。PVGループは、特権的なシミュレーション情報を使って結果を診断し、更新を検証しつつ、学習した技能を公開された観測とAPIの意味論に結び付ける設計である。 性能評価として、GPT-5.6 SolがLIBERO-90で技能を学習し、各固定チェックポイントをGPT-6 Astraで評価すると、LIBERO-Pro Longの成功率は2.0%から56.3%へ上昇したとしている。また、独立したRobosuite訓練では、7課題でSolが平均85.1%、Opus 5が平均89.4%の成功率を示した。さらに、Solで学習したLIBERO-90技能を固定したまま実機4課題に適用し、平均完了率78.75%を得たとしている。VerifierまたはGovernorをLIBERO-90訓練から外すと、最終的なPro Long成功率はそれぞれ17.3ポイント、13.3ポイント低下した。

Key Facts

本紙の見方

本件の新しさは、シム・ツー・リアル転移そのものではなく、共通APIを中心に技能を「実行可能な単位」として学び、CerebellumとBrainの二層で積み上げる点にある。仮想環境で学んだ内容を実機へ持ち込む試みは既定路線だが、ここではタスク政策の微調整や技能メモリ更新を不要とする設計を前面に出しているため、学習後の移植性をどう確保するかが焦点になる。 数値面では、LIBERO-Pro Longの成功率が2.0%から56.3%へ上がったこと、Robosuiteの7課題で85.1%と89.4%を示したこと、実機4課題で78.75%の平均完了率を得たことが、この手法の適用範囲を示している。ただし、これらはそれぞれ別の評価系であり、同じ条件での単純比較にはならない。したがって、この論文の意味は単一ベンチマークの高得点ではなく、仮想・シミュレーション・実機をまたぐ技能表現の一貫性にあるとみられる。 本紙の見方では、PVGループの位置づけも重要である。VerifierとGovernorを外すと最終成功率がそれぞれ17.3ポイント、13.3ポイント下がるため、性能は単に大規模モデルの能力だけでなく、更新を検証し制御する構成に依存していることがうかがえる。つまり、ロボット操作の学習は「何を学ぶか」だけでなく、「どの情報を許可し、どの段階で固定するか」という設計問題に寄っている。今後確認すべき論点は、4実機課題の内訳、APIの具体仕様、学習に使った権限付きシミュレーション情報の範囲、そして固定された技能がより広い実環境条件でどこまで保つかである。

なぜ重要か

論文が示すのは、実機への転移で毎回の再学習や技能更新を前提にしない学習経路である。ロボット制御をAPIと技能階層に分けているため、評価の焦点は単発の精度ではなく、学習済み技能を異なる実体へどこまで保てるかに移る。

日本への影響

日本のロボット制御研究や実機検証では、シミュレーションと実機の差分をどう埋めるかが引き続き論点になる。この論文のように、共通APIと階層化された技能表現を使う方式は、実機側の評価系や操作インターフェースを整える重要性を示している。