何が起きたか
香港大学のMultimedia Laboratory (MMLab)が中心となり、シミュレーションと実機の両方で汎用ロボット操作ポリシーを評価する統合ベンチマーク「RoboDojo」を開発した。RoboDojoは42のシミュレーションタスクと18の実機タスクを含み、Isaac Simによる並列シミュレーションでスケーラブルな評価を実現する。30のポリシーを統合し、公開リーダーボードを確立した。
詳細
RoboDojoは、シミュレーションと実機の両方で汎用ロボット操作ポリシーを包括的に評価するための統合ベンチマークである。既存のベンチマークは、単純で短期的なタスクや技能が狭いタスクに限られ、シミュレーションのみまたは実機のみで実施されることが多い。シミュレーションはスケーラブルなフィードバックを提供するが物理的な展開の課題を見逃し、実機評価はコストが高く時間がかかり再現が難しい。RoboDojoはこれらの問題に対処するため、42のシミュレーションタスクと18の実機タスクを提供し、多様で補完的な操作能力をカバーする。シミュレーションベンチマークは、汎化、記憶、精度、長期的実行、オープン語彙命令追従の5つの次元を評価し、実機ベンチマークは困難な物理的展開条件にポリシーをさらす。RoboDojoはIsaac Simでの異種並列シミュレーションによるスケーラブルな評価をサポートし、再現可能な実機評価システム「RoboDojo-RealEval」を提供する。これはリモートクラウドアクセス、標準化されたハードウェア、シーンリセット、評価プロトコル、展開インターフェースを含む。さらに、XPolicyLabと連携し、ポリシーを一度統合すればシミュレーションと実機の両方で最小限の適応で評価できる。研究チームは30のポリシーをXPolicyLabに統合し、RoboDojoで評価して公開リーダーボードと現在のポリシー性能の体系的分析を確立した。
Key Facts
| RoboDojoは42のシミュレーションタスクと18の実機タスクを含む。 | [0] |
| シミュレーションベンチマークは汎化、記憶、精度、長期的実行、オープン語彙命令追従の5次元を評価する。 | [0] |
| RoboDojoはIsaac Simでの異種並列シミュレーションをサポートする。 | [0] |
| RoboDojo-RealEvalはリモートクラウドアクセス、標準化されたハードウェア、シーンリセット、評価プロトコル、展開インターフェースを提供する。 | [0] |
| XPolicyLabと連携し、ポリシーを一度統合すればシミュレーションと実機の両方で評価できる。 | [0] |
| 30のポリシーがXPolicyLabに統合され、RoboDojoで評価された。 | [0] |
| RoboDojoは香港大学のMultimedia Laboratory (MMLab)が主導し、Ping Luo教授と博士課程学生のTianxing Chen氏が共同で開始した。 | [1] |
| プロジェクトはカリフォルニア大学バークレー校や清華大学を含む約20の世界の主要大学の研究者と共同で開発された。 | [1] |
| 論文はarXivプレプリントサーバーに投稿された。 | [1] |
なぜ重要か
RoboDojoは、シミュレーションと実機の両方を統合した包括的なベンチマークを提供することで、汎用ロボット操作ポリシーの評価における標準化の欠如に対処する。これにより、研究者は客観的に性能を測定し、システムを比較できるようになり、ロボット操作分野の進展を加速させる可能性がある。