時空間選好を用いたヒューマノイド移動操作のための動作リターゲティング
Motion Retargeting with Spatiotemporal Preferences for Humanoid Loco-Manipulation
視覚言語モデルで重要な身体部位とキーフレームを選び、最適化の計算資源を重点配分することで、物体接触を保ちながら人間の動作をヒューマノイドへ効率的に転写する手法を提案した。
詳しい要約
1. どんなもの?
2. 先行研究と比べてどこがすごい?
3. 技術・手法の肝は?
4. どうやって有効だと検証した?
5. 議論はある?
6. 次に読むべき論文は?
※ AIが要旨から生成した要約です。正確性は原文をご確認ください。
著者: Xiongbo Shi, Shihang Du, Zongyou Yu, Ao Zhou, Xudong Zhang, Ziyu Lin, Haodong Zhang, Junqiao Zhao, Guang Chen
分類: cs.RO
原文アブストラクト
Human motion retargeting bridges the embodiment gap between humans and humanoid robots by converting human demonstrations into reference trajectories for whole-body control and loco-manipulation. For object-interaction tasks, successful execution depends on accurately preserving body--object relations at critical stages. However, uniform per-frame iteration budgets do not account for these localized accuracy requirements, limiting the computational efficiency of retargeting. To address this limitation, we present Spatiotemporal Retargeting (STR), which uses keyframes and key body parts to allocate optimization effort. Specifically, a vision-language model selects relevant motion signals and body parts, and keyframes are identified from changes in the selected signals. Based on these selections, STR assigns additional solver iterations to keyframes and higher interaction weights to the selected parts. To further improve contact fidelity, we introduce Mechanics-Aware Contact Anchoring (MCA) to refine object-surface contact positions using an approximate object-wrench model while retaining the selected surface directions. Building on the resulting references, we develop Spatiotemporal Reinforcement Learning (STRL), which combines adaptive key-stage sampling with a contact reward based on target proximity and object contact forces for downstream control. Simulation experiments on a Unitree G1 and real-world experiments on a Unitree R1 demonstrate that STR improves geometric contact coverage and continuity at lower computational cost, while the resulting references improve downstream task completion across diverse object-interaction motions.
関連論文
- OTRetarget: 最適輸送によるロボットと物体の関節動作リターゲティング動作リターゲティング
- Human2Humanoid: ヒューマノイドロボットのための物理認識クロスモルフォロジー動作リターゲティング動作リターゲティング
- MoReFlow: フローマッチングによる教師なし動作リターゲティング学習動作リターゲティング
- 暗黙的キノダイナミック動作リターゲティングによるスケーラブルな全身動作転移動作リターゲティング
- 誘導拡散モデルによるマルチエンボディメント・ロボット動作リターゲティング動作リターゲティング
- ImitationNet: 共有潜在空間による教師なし人間→ロボット動作リターゲティング動作リターゲティング