ロボット操作ポリシー評価の新ベンチマーク「RoboDojo」公開 シミュレーション42課題・実機18課題を統合

何が起きたか

2026年7月5日、arxiv.orgに投稿された論文で、ロボット操作ポリシーの包括的評価のための統合ベンチマーク「RoboDojo」が発表された。RoboDojoはシミュレーション42課題と実機18課題を含み、汎用ポリシーの能力を多面的に評価する。

詳細

RoboDojoは、シミュレーションと実世界の両方で評価できる統合ベンチマークである。シミュレーションでは、汎化、記憶、精度、長時間実行、オープン語彙命令追従の5次元を評価する。実世界では、物理的展開の困難な条件にポリシーをさらす。Isaac Sim上で並列シミュレーションによるスケーラブルな評価をサポートし、再現可能な実世界評価システム「RoboDojo-RealEval」を提供する。これは、リモートクラウドアクセス、標準化されたハードウェア、シーンリセット、評価プロトコル、展開インターフェースを含む。また、ポリシー統合フレームワーク「XPolicyLab」と連携し、一度の統合でシミュレーションと実世界の両方で評価できる。現在、30のポリシーがXPolicyLabに統合され、RoboDojoで評価され、公開リーダーボードが確立されている。

Key Facts

本紙の見方

今回の発表は、ロボット操作ポリシーの評価手法における新たな試みとして位置づけられる。既存のベンチマークは、単純な短期間タスクや特定のスキルに限定され、シミュレーションか実世界のどちらか一方でしか評価されないことが多かった。RoboDojoは、シミュレーションと実世界の両方を統合し、多様な能力をカバーすることで、ポリシーの包括的な評価を目指す点で新規性がある。特に、実世界評価の再現性を高めるためのRoboDojo-RealEvalは、評価の標準化とリモートアクセスを提供し、実世界評価のコストと時間の問題に対処しようとするものだ。 本紙の過去報道との接続は、関連記事が提供されていないため、直接の連続性を指摘することはできない。しかし、ロボット操作ポリシーの研究分野では、評価ベンチマークの標準化が進んでおり、RoboDojoはその流れに沿ったものとみられる。 業界構造への含意としては、評価ベンチマークの標準化が進むことで、ポリシーの性能比較が容易になり、研究開発の効率化につながる可能性がある。また、実世界評価の再現性を高めることで、シミュレーションと実世界のギャップを埋める取り組みが加速するかもしれない。一方で、RoboDojoが提供するタスクや評価次元が、実際の産業応用にどの程度対応しているかは不明であり、今後の検証が待たれる。 未確定の論点としては、RoboDojoのタスク設計がどのように選定されたか、また、30のポリシーの性能が具体的にどのような結果を示したかが挙げられる。さらに、RoboDojo-RealEvalの実運用におけるコストや、クラウドアクセスの利用条件なども、今後の情報公開を待つ必要がある。

なぜ重要か

RoboDojoは、ロボット操作ポリシーの評価手法に新たな基準を提供する可能性がある。シミュレーションと実世界を統合した評価は、研究開発の効率化と実用化への橋渡しに寄与するかもしれない。読者にとっては、ロボット操作技術の進展を測る指標として注目に値する。