日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
模倣学習arXiv:2611.06118

潜在的な物理特性へのオンライン適応による模倣学習

Online Adaptation to Latent Physical Properties for Learning from Demonstration

シェア:XThreadsFacebookLINEはてブBluesky

物体の物理特性の潜在表現を動力学モデルと共に学習し、実行時に観測との誤差から潜在表現をオンライン更新することで、見た目が同じでも物理特性が異なる物体へのマニピュレーション動作を適応させる手法を提案した。

詳しい要約

1. どんなもの?

- 視覚的に同一だが物理特性が異なる物体の操作を対象としたLearning from Demonstration手法。 - 物体の物理特性のlatent representationをオンラインで推定し、それに条件付けられたimitation policyでregraspingやcontact location変更などの適応行動を生成する。 - dynamics modelと物体固有のlatent representationを実演から同時学習し、実行時はpolicy重みを固定したままlatentのみ更新する枠組み。

2. 先行研究と比べてどこがすごい?

- 従来のimitation learningは視覚的に同一な物体を区別できず、物理特性に応じた行動適応が困難であった。 - 本手法は物理特性のlatent representationを実演から学習し、実行中のinteractionで得られる情報に基づきオンライン更新することで、接触位置変更などの適応を可能にする点が新しい。 - 具体的な先行研究名は要旨からは不明。

3. 技術・手法の肝は?

- dynamics modelと物体固有のlatent representationを、物理特性への適応行動を含む実演からjointly learningする。 - 学習したlatent representationを条件としてimitation policyを学習。 - 実行時はdynamics modelとpolicy weightsを固定し、予測観測と実観測のdiscrepancyに基づきlatent representationを更新、interactionを通じてaction generationに反映させる。

4. どうやって有効だと検証した?

- center of massが異なる物体を用いたreal-world実験とsimulation実験を実施。 - latent representationによるonline adaptationがtask success rateを改善することを示した。 - 一方simulationでは、実演に存在しないcenter-of-mass位置でのsuccess rateは約30%に留まり、未見の物理特性への適応には限界があることを報告。

5. 議論はある?

- online adaptationによりsuccess rateは向上するが、実演に含まれない物理特性(未見のcenter-of-mass)への汎化は限定的で約30%に留まる。 - 未見特性への適応限界の原因や改善策についての詳細は要旨からは不明。 - project pageが公開されている。

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない。 - 関連手法としてimitation learning、Learning from Demonstration、latent dynamics model、domain randomization、meta-learningなど同分野の定番手法を次に読む候補として挙げる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Kotaro Kajitsuka, Masaki Murooka, Fumio Kanehiro

分類: cs.RO

原文アブストラクト

Manipulating visually identical objects with different physical properties requires adapting actions based on information acquired through interaction. We address the problem of learning from demonstrations how to adapt manipulation actions, such as regrasping and changing contact locations, based on physical-property information acquired during interaction. To this end, we propose a learning-from-demonstration method that learns latent representations of physical properties needed to predict object responses and conditions a policy on online estimates of these representations. A dynamics model and object-specific latent representations are jointly learned from demonstrations that include behaviors adapting to the objects' physical properties, and the learned representations are then used to condition an imitation policy. During execution, the dynamics model and policy weights remain fixed, while the latent representation is updated based on the discrepancy between predicted and actual observations, allowing interaction with the object to inform action generation. Real-world and simulation experiments with objects whose centers of mass differ suggest that online adaptation through latent representations of physical properties can improve task success rates. However, in simulation, success rates on center-of-mass locations absent from the demonstrations remained around 30%, indicating limited adaptation to unseen physical properties. Project page: https://isri-aist.github.io/latent-dynamics-project-page/

関連論文

PR本紙発行元 EmplifAI