日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

ヒューマノイド/協調動作arXiv:2611.08407

ソーシャルヒューマノイド:人間と協調する全身動作生成システム

Social Humanoid: Socially Responsive Human-Humanoid Interaction

シェア:XThreadsFacebookLINEはてブBluesky

人間の動きに反応して29自由度ヒューマノイドが全身動作を生成・実行する階層システムを提案し、人間とヒューマノイドの協調動作ベンチマークを構築した。

詳しい要約

1. どんなもの?

- 29-DoF の Unitree G1 上で、人間パートナーの動きに条件づけて社会的に応答する全身運動を生成・実行する階層型システム「Social Humanoid」 - 高レベル policy が人間と humanoid の運動を共有 tokenized representation で柔軟に系列モデリングし、反応的な humanoid 運動生成と遮蔽時のパートナー運動予測を行う - 低レベル whole-body tracking controller が生成運動を実機で実行 - 学習用に two-phase adaptive retargeting 手続きを導入し、5 つの motion-capture datasets から 260 時間の HHI benchmark を構築 - simulation と real world で多様な interaction における協調的・人間整合的な挙動を示す

2. 先行研究と比べてどこがすごい?

- 従来 humanoid robots は solitary agent として訓練され、互いに先読み・調整する人間パートナーと物理的に協調できない点が課題 - 本研究は人間パートナーの運動に条件づけた socially responsive whole-body motion の生成・実行によりこのギャップを埋める - 共有 tokenized representation による柔軟な系列モデリングで、反応生成と遮蔽時のパートナー運動予測を両立 - two-phase adaptive retargeting により接触力学・reachability・相対 body scale を保ちながら人間-humanoid 相互作用データを生成 - 260 時間の HHI benchmark を新たに提供

3. 技術・手法の肝は?

- 階層型システム: 高レベル policy と低レベル whole-body tracking controller から構成 - 高レベル policy は人間と humanoid の運動を共有 tokenized representation で柔軟に系列モデリング - パートナーが遮蔽された場合の運動予測と、反応的な humanoid motion 生成を担う - 低レベル controller が生成運動を 29-DoF Unitree G1 上で追従実行 - two-phase adaptive retargeting: 一方の interaction partner を robot に retarget し、他方を morphing して接触力学・reachability・相対 body scale を保持 - 5 つの motion-capture datasets に適用し HHI benchmark を構築

4. どうやって有効だと検証した?

- simulation と real world の双方で評価 - 多様な interaction types において coordinated かつ human-aligned な behavior が得られることを示す - 具体的な評価指標・比較手法・被験者数などは要旨からは不明

5. 議論はある?

- 要旨からは不明 - 限界・失敗事例・倫理的考察・実環境での安全性に関する議論は要旨に記載なし

6. 次に読むべき論文は?

- 要旨で参照・比較されている個別研究は明示されていない - 関連手法として human motion retargeting、motion-capture datasets を用いた human-human interaction modeling、whole-body tracking controller、tokenized motion representation に関する研究 - 同分野の定番として humanoid whole-body control や human motion prediction の文献を次に読む候補として挙げる

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Vongani H. Maluleke, James Ni, Kie Horiuchi, Lea Wilken, Jiahui Lei, Evonne Ng, Roei Herzig, Jitendra Malik, Trevor Darrell, Angjoo Kanazawa

分類: cs.RO, cs.CV, cs.LG

原文アブストラクト

Humanoid robots are typically trained as solitary agents, leaving them unable to coordinate physically with human partners who naturally anticipate and adjust to one another. To bridge this gap, we present Social Humanoid, a hierarchical system that generates and executes socially responsive whole-body motion on a 29-DoF Unitree G1 conditioned on a human partner's motion. Its high-level policy performs flexible sequence modeling of human and humanoid motion through a shared tokenized representation, generating reactive humanoid motion and anticipating the partner's motion when they are occluded, while a low-level whole-body tracking controller executes the generated motion on the robot. To train the system, we introduce a two-phase adaptive retargeting procedure that retargets one interaction partner to the robot while morphing the other partner to preserve contact dynamics, reachability, and relative body scale. We apply this procedure across five motion-capture datasets to produce a new Human-Humanoid Interaction (HHI) benchmark of 260 hours of human-humanoid interactions. Our results demonstrate that Social Humanoid produces coordinated, human-aligned behavior across diverse interaction types in simulation and the real world. Project page: https://von31.github.io/social-humanoid/

  1. 1中国がソフトバンクのABBロボット事業買収を阻止したとFT報道、Bloomberg伝える提携・買収
  2. 2Tesla、Optimusの予約受付を12月初旬に始める見通しと報道新製品・発表
  3. 3NVIDIA、Cosmosを用いたインタラクティブシミュレーション向け世界モデルを解説研究・技術
  4. 4トヨタのロボット活用を扱う記事を掲載業界動向
  5. 5Agility、SPAC合併でナスダック上場資金調達
PR本紙発行元 EmplifAI