日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
マニピュレーションarXiv:2609.36553

隠れた運動学を探索して関節物体を操作する学習

Learning to Explore Hidden Kinematics for Articulated Object Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

関節物体の運動学の曖昧さをベイズ信念分布と強化学習で解消し、情報利得を報酬に探索行動を学習する手法を提案。

詳しい要約

1. どんなもの?

関節物体の運動学を視覚だけでは曖昧な状況で、相互作用を通じて隠れた運動学を探索し操作する手法。信念分布を関節タイプとパラメータ上で維持し、Bayesian filteringで更新。その信念をper-point articulation flow fieldとして描画し、方策の条件付けに用いる。強化学習で訓練し、各相互作用が事後分布から除去するentropyを報酬とする。

2. 先行研究と比べてどこがすごい?

従来のactive perceptionは各ステップで信念を最も鋭くする単一行動を貪欲に探索するが、接触・慣性ダイナミクスのforward modelが未知のためhorizon上に拡張できない。提案法は行動選択を訓練にamortizeし、探索を学習された振る舞いにする。PartManip benchmarkのdoor/drawer操作で先行手法を上回り、ArticuRiddleで61.7%成功(最良先行手法44.4%)。

3. 技術・手法の肝は?

信念分布をjoint typeとパラメータ上で維持し、generative priorから初期化、観測されたpart motionに基づくBayesian filteringで更新。信念をper-point articulation flow field(現在の事後分布が物体上の各点に対して予測する運動)として描画し、方策に条件付け。この表現は関節運動のinductive biasを持ち、latent encodingや観測から追跡したflowより汎化。強化学習で訓練し、各相互作用が事後分布から除去するentropyを報酬とする。

4. どうやって有効だと検証した?

PartManip benchmarkのdoorおよびdrawer操作で先行手法を上回る性能を確認。さらに、見た目が誤った関節構造を示唆する物体からなる新データセットArticuRiddleで61.7%の成功率を達成(最良先行手法は44.4%)。

5. 議論はある?

要旨からは不明。

6. 次に読むべき論文は?

PartManip benchmark、ArticuRiddle dataset、active perception、Bayesian filtering、reinforcement learning、per-point articulation flow field。関連手法としてforward modelを用いたモデルベース強化学習やlatent variable modelも参照。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ruiyao Liu, Boshu Lei, Zhuoyang Pan, Kostas Daniilidis

分類: cs.RO

原文アブストラクト

The kinematics of an articulated object is often ambiguous from vision alone. Interaction resolves the ambiguity, and active perception methods exploit this by searching for the single action that most sharpens a belief over the kinematic parameters at each step. Such greedy search cannot be extended over a horizon without forward models of the contact and inertial dynamics, which are themselves unknown. We instead amortize action selection into training. We maintain a belief distribution over joint type and parameters, initialized from a generative prior and updated by Bayesian filtering on the observed part motion. To condition the policy on this belief, we render it as a per-point articulation flow field, the motion that the current posterior predicts for every point on the object. Carrying the inductive bias of articulated motion, this representation generalizes better than a latent encoding of the belief or flow tracked from observation. We train the policy with reinforcement learning, rewarding the entropy that each interaction removes from the posterior, so that informative exploration becomes learned behavior rather than a search at every step. Our method outperforms previous approaches across door and drawer manipulation on the PartManip benchmark, and reaches 61.7% success on ArticuRiddle, a new dataset of objects whose appearance implies the wrong articulation, against 44.4% for the best previous method. Project Website: https://hiddenkinematics.github.io/

関連論文

PR本紙発行元 EmplifAI