同型外骨格テレオペレーションと独立スキルルーティングによるヒューマノイドの組合せ的マニピュレーション
Compositional Humanoid Manipulation through Isomorphic Teleoperation and Independent Skill Routing
腕ごとに実演したスキルを共有エキスパートプール上で独立にルーティングする拡散ポリシーHS-MoDPと、腕の関節を直接操作できる同型外骨格G1Exoを提案し、Unitree G1で接触を伴う棚作業の成功率を35%から65%に向上させた。
著者: Yiming Wang, Peixian Yang, Lifeng Zhuo, Lai Wei, Xinling Du, Kun Song, Weiming Wang, Daolin Ma
分類: cs.RO
原文アブストラクト
Humanoid manipulation requires reusable arm skills, yet demonstrating every possible skill combination is impractical. We present Humanoid Semantic Mixture-of-Experts Diffusion Policy (HS-MoDP), which composes separately demonstrated arm skills through independent semantic routing over a shared expert pool. This design preserves arm-specific skill control while sharing action-generation parameters across arms. A semantic scheduler integrates the learned policy with an existing locomotion controller through alternating manipulation and repositioning stages, extending the effective workspace and enabling skill reuse across location changes. To acquire demonstrations of whole-body contact manipulation, we develop G1Exo, an isomorphic exoskeleton that provides direct joint-level control of arm configurations. Experiments on a Unitree G1 show stronger skill composition than the baselines. G1Exo enables more reliable contact teleoperation than end-effector VR-IK, and its demonstrations improve contact-skill learning across four policy architectures. For HS-MoDP, switching from VR-IK to G1Exo demonstrations raises full cabinet workflow success from 35% to 65%. All project hardware designs and source code will be released as open source after the review process.
関連論文
- 連続行動空間における蒸留木探索による長期的マルチオブジェクト再配置マニピュレーション
- TrajWAM:動的物体操作のための軌道誘導型ワールドアクションモデルマニピュレーション
- フリート経験から学ぶ:ロボットの集合学習パラダイムマニピュレーション
- 触覚による把持内物体回転:シミュレーションと実機におけるハンド形態の比較研究マニピュレーション
- 混雑環境での大規模クロスエンボディメント巧みな把持マニピュレーション
- 目隠し精密組立:多様な部品に対応する固有感覚によるsim-to-realペグ挿入マニピュレーション