日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
マニピュレーションarXiv:2610.17843

物理を考慮した物体中心SE(3)予測によるリアルタイム能動的動的把握

Physics-Aware Object-Centric SE(3) Forecasting for Real-Time Proactive Dynamic Grasping

シェア:XThreadsFacebookLINEはてブBluesky

短い姿勢履歴から物体の将来の剛体軌道をSE(3)で予測し、到達可能性を考慮した接触状態選択により動的な物体把持を実現する軽量フレームワークを提案。

詳しい要約

1. どんなもの?

- 動的物体を把持するため、接触が起こる未来の剛体状態をSE(3)で予測する枠組み。 - 物体中心のforecast-then-select方式で、短い姿勢履歴から未来軌道を予測。 - reachability-aware interception selectorで接触可能な状態を選ぶ。 - 実時間で動作し、シミュレーションと実世界で検証。

2. 先行研究と比べてどこがすごい?

- 現在の物体姿勢に反応するのではなく、接触に関連する未来のSE(3)状態を予測する点が新しい。 - 視覚的に完全な未来シーンを予測するdense visual future predictionより軽量で高速。 - シミュレーションのランダム化物理で学習し、実物体に転移可能。 - 成功率をシミュレーションで24.5%から62.0%、実世界で15.3%から67.3%に改善。

3. 技術・手法の肝は?

- 物体中心のforecast-then-selectフレームワーク。 - 短い姿勢履歴から未来の剛体軌道を予測するforecaster。 - 運動学的・時間的制約下で実行可能な接触状態を選ぶreachability-aware interception selector。 - プリミティブ形状のランダム化物理シミュレーションで学習。 - 実物体ではメートル幾何とSE(3)状態履歴を復元して転移。

4. どうやって有効だと検証した?

- シミュレーションと実世界の動的把握タスクで評価。 - 実世界ではcatching、conveyor、turntable interceptionを実施。 - 成功率がシミュレーションで24.5%→62.0%、実世界で15.3%→67.3%に向上。 - SE(3) forecasterは15msで動作し、dense visual future predictionより桁違いに高速。

5. 議論はある?

- 効果的なproactive graspingには未来シーン全体の想像は不要で、接触を決めるコンパクトな物理的未来の予測が有効。 - 実時間動的把握のための実用的抽象化としてSE(3)剛体状態を提案。 - 限界や失敗事例、一般物体への適用範囲については要旨からは不明。

6. 次に読むべき論文は?

- dense visual future predictionに関する研究。 - proactive dynamic graspingの先行研究。 - SE(3)軌道予測やobject-centric forecastingの関連手法。 - reachability-aware interceptionや動的把握の計画手法。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yirui Zhou, Hongli Xu, Ying Zheng, Yi Wang, Lap-Pui Chau

分類: cs.RO

原文アブストラクト

Proactive dynamic grasping requires robots to predict the future state at which physical contact will occur, rather than reacting to the currently observed object pose. But what future must the robot predict, and at what level of abstraction? We argue that contact-relevant rigid-body state in SE(3) is a compact task-sufficient abstraction for this problem: it directly determines where and when the robot should establish contact, without requiring visually complete future scenes. This insight leads to a lightweight object-centric forecast-then-select framework that predicts future rigid-body trajectories from short pose histories and uses a reachability-aware interception selector to choose feasible contact states under kinematic and timing constraints. Trained with randomized physics simulation over primitive shapes, the forecaster transfers to real objects once their metric geometry and SE(3) state histories are recovered. Experiments across simulation and real-world dynamic grasping tasks show that our framework improves the average success rate from \(24.5\%\) to \(62.0\%\) in simulation, and from \(15.3\%\) to \(67.3\%\) in real-world catching, conveyor, and turntable interception. The SE(3) forecaster runs in \(15\,\mathrm{ms}\), orders of magnitude faster than dense visual future prediction, enabling real-time contact decision making. Our results suggest that effective proactive grasping does not require imagining the entire future scene. Instead, predicting the compact physical future that determines contact provides an effective and practical abstraction for real-time dynamic grasping.

関連論文

PR本紙発行元 EmplifAI