Open-TeleVision、没入型遠隔操作システムを公開 立体視と腕・手の動作ミラーリングを実現

何が起きたか

研究チームは2024年7月1日、没入型遠隔操作システム「Open-TeleVision」を発表した。このシステムは、オペレータがロボットの周囲を立体的に知覚できるようにし、オペレータの腕と手の動きをロボットに反映する。2種類のヒューマノイドロボットを用いて、缶の仕分け、缶の挿入、折りたたみ、荷降ろしの4つの長期的で精密なタスクでデータ収集と模倣学習ポリシーの訓練を行い、実世界で展開した。

詳細

Open-TeleVisionは、オペレータがロボットの周囲を立体的に知覚できるようにする没入型遠隔操作システムである。また、オペレータの腕と手の動きをロボットに反映し、オペレータの意識がロボットの身体に移ったかのような体験を提供する。研究チームは、2種類のヒューマノイドロボットを用いて、缶の仕分け、缶の挿入、折りたたみ、荷降ろしの4つの長期的で精密なタスクでデータを収集し、模倣学習ポリシーを訓練して実世界で展開した。システムはオープンソースとして公開されている。

Key Facts

本紙の見方

今回の発表は、ロボット学習のためのデータ収集手法として遠隔操作に着目し、その直感性と使いやすさを高めることで、高品質で多様なデータを大規模に収集することを目指すものである。従来の遠隔操作システムは、2次元の映像と限られた操作インターフェースに依存することが多く、オペレータの没入感や操作の直感性に課題があった。Open-TeleVisionは、立体視による能動的な知覚と、腕と手の動作のミラーリングにより、オペレータがロボットの身体を自分のもののように操作できる点が新しい。 本紙の過去報道との接続は、関連記事が提供されていないため直接の言及は避けるが、ロボット学習におけるデータ収集の重要性は広く認識されており、本システムはその課題に対する一つの解決策を示すものと位置づけられる。 業界構造への含意としては、遠隔操作システムのオープンソース化により、ロボット学習の研究コミュニティが共通のツールを利用できるようになり、データ収集の標準化や再現性の向上が進む可能性がある。また、ヒューマノイドロボットの実用化に向けて、複雑なタスクの学習データを効率的に収集する手段として、遠隔操作の重要性が増すとみられる。 未確定の論点としては、本システムが収集したデータの質や量が、実際の産業応用に十分なものかどうか、また、異なるロボットプラットフォームへの適用可能性や、長期的なタスクにおけるポリシーの汎化性能が焦点になると考えられる。さらに、オープンソース化されたことで、コミュニティによる改良や応用が進むかどうかも注目される。

なぜ重要か

本システムは、ロボット学習におけるデータ収集の効率と質を向上させる可能性を秘めており、ヒューマノイドロボットの実用化に向けた重要な一歩となる。オープンソース化により、研究コミュニティ全体の進展を促進する可能性がある。