BiPOP: 長期的な両腕ロボット操作のための部分順序計画
BiPOP: Partial-Order Planning for Long-Horizon Bimanual Robotic Manipulation
LLMと時間的部分順序計画を組み合わせ、両腕の協調が必要な長期タスクを、作業空間の分割と腕間依存関係のモデル化により効率的に計画するフレームワークを提案した。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Kun Chu, Xufeng Zhao, Jan-Gerrit Habekost, Cornelius Weber, Stefan Wermter
分類: cs.RO
原文アブストラクト
Bimanual robotic manipulation is versatile, yet its central challenge lies not only in executing dexterous motion with each hand, but also in coordinating the two arms for long-horizon manipulation under coupled spatial and temporal constraints. Prior work has largely focused on endowing robots with human-level manipulation skills, paying less attention to the structure of bimanual behaviour itself: many practical tasks are a coordinated composition of reusable unimanual skills and a small set of synchronous bimanual skills. This makes high-level spatio-temporal coordination, rather than skill acquisition alone, a key bottleneck for efficient bimanual execution. We propose BiPOP, a framework that couples Large Language Models (LLMs) with Temporal Partial-Order Planning for long-horizon bimanual manipulation. At its core is an explicit spatio-temporal model that partitions the workspace by arm reachability and captures inter-arm dependencies, arm assignment, synchronization requirements, and opportunities for safe concurrent execution. Building on this model, an LLM translates natural-language instructions into a formal PDDL specification, while a temporal planner enforces the constraints and schedules actions, yielding plans that are logically consistent at the symbolic level and efficient through parallel execution. On simulated long-horizon tasks of varying complexity, BiPOP outperforms open-loop planning with strong reasoning models and closed-loop ReAct-style planning in success rate, planning time, and plan efficiency, and the full pipeline runs end to end on the real bimanual robot NICOL. A failure analysis further shows that LLM-only planners mainly violate spatial and temporal coordination constraints, which motivates delegating these constraints to a symbolic planner. Code: https://github.com/Kchu/BiPOP
関連論文
- アクションアフィンワールドモデルによる推論時の高速ポリシー改善マニピュレーション
- キャブ視覚と制御情報の融合による油圧ショベルの関節状態推定マニピュレーション
- 世界インコンテキスト学習によるエージェント型ロボットマニピュレーションマニピュレーション
- 把持分類ラベルをモード切替として用いるクライミングホールドの巧みな把持マニピュレーション
- エージェント型ロボティクスによる自己学習で物体を反転させるマニピュレーション
- 物体再配置のための文脈的動作制約の学習マニピュレーション