何が起きたか
同社の研究ブログで、人間の映像データをロボットデータと共に学習させることで、ロボットデータが少ないタスクで性能が約2倍向上したと報告。特別な転移機構を用いず、事前学習データの多様性と規模の拡大に伴い、人間からロボットへの知識転移が創発的に生じることを示した。
なぜ重要か
ロボット実機のデータを十分集めにくい研究者にとって、人の装着型カメラ映像を三次元の手の位置付きでロボットデータと一緒に追加学習し、特別な転移手法なしで使える可能性を示した点が重要です。Physical Intelligenceによると、この効果は事前学習で使うロボットデータの量と多様性を増やしたときに強まり、人の例とロボットの例の表現が近づくことも確認されました。