日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
ヒューマノイド動作生成arXiv:2610.13373

PartiGen: 部位認識表現による言語条件付きヒューマノイド動作生成

PartiGen: Part-Aware Representations for Language-Conditioned Humanoid Motion Generation

シェア:XThreadsFacebookLINEはてブBluesky

身体部位ごとの注意機構と拡散モデルを組み合わせ、テキストからヒューマノイドの全身動作を生成する手法を提案。Unitree G1実機で動作を検証した。

詳しい要約

1. どんなもの?

- 言語条件付きの humanoid motion generation を扱う研究 - PartiGen という part-aware latent diffusion framework を提案 - 解剖学的構造を whole-body motion representation に組み込む - 身体部位ごとの attention と融合で局所と全身文脈を統合 - text と motion history を条件に motion primitives を自己回帰生成 - forward-kinematics supervision と end-of-sequence predictor を採用 - Unitree G1 上での実行を想定

2. 先行研究と比べてどこがすごい?

- 先行研究として TextOp と比較 - HumanML3D を Unitree G1 に retarget した設定で評価 - segment-level FID 3.165 を達成し TextOp 比 16.8% 削減 - R@1 を 1.4 percentage point 改善 - 16-frame primitives の duration study で endpoint prediction により - mean absolute duration error を 12.471 から 3.080 frames に低減 - 固定長 cutoff より duration 推定が大幅に改善

3. 技術・手法の肝は?

- part-aware latent diffusion framework - anatomically masked frame features に part-specific attention を適用 - その出力を融合し local limb information と whole-body context を結合 - text と motion history を条件に motion primitives を自己回帰生成 - forward-kinematics supervision で kinematic consistency を促す - learned end-of-sequence predictor が生成後の frame-level endpoint を選択 - 身体部位構造を shared whole-body motion representation に組み込む

4. どうやって有効だと検証した?

- HumanML3D を Unitree G1 に retarget して評価 - segment-level FID と R@1 を TextOp と比較 - 16-frame primitives の duration study を実施 - endpoint prediction と fixed-length cutoff の duration error を比較 - pretrained frozen GRIT tracker で robot execution を評価 - MuJoCo で 500 中 409 (81.8%) が posture-based stability screen を通過 - simulation screening と manual selection 後、real G1 で 27 中 26 が成功

5. 議論はある?

- 要旨からは不明 - 限界や失敗要因の詳細な議論は要旨に記載なし - real G1 での試行数は 27 と限られる - simulation から real への転移条件の詳細は要旨からは不明 - 倫理面や安全性の議論は要旨からは不明

6. 次に読むべき論文は?

- TextOp - HumanML3D - Unitree G1 - GRIT tracker - MuJoCo - latent diffusion 系の human motion generation - language-conditioned humanoid motion generation

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Chuxuan Huang, Zhanxiang Cao, Tianyue Zhan, Haoyang Li, Yang Zhang, Liyun Yan, Chenlin Ming, Keqi Zhu, Yizhi Chen, Shengcheng Fu, Zihao Zhou, Xinyi Peng, Kaixuan Zhang, Boyang Xing, Jiawei Bao, Yang Yang, Yue Gao

分類: cs.RO

原文アブストラクト

Translating language into humanoid motion requires coordinating body parts, determining motion duration, and producing references suitable for robot execution. We introduce PartiGen, a part-aware latent diffusion framework that incorporates anatomical structure into a shared whole-body motion representation. Part-specific attention processes anatomically masked frame features, and its outputs are fused to combine local limb information with whole-body context. Conditioned on text and motion history, the model generates motion primitives autoregressively. Forward-kinematics supervision encourages kinematic consistency, while a learned end-of-sequence predictor selects a frame-level endpoint after generation. On HumanML3D retargeted to the Unitree G1, PartiGen achieves a segment-level FID of 3.165, a 16.8% reduction over TextOp, and improves R@1 by 1.4 percentage points. In the duration study with 16-frame primitives, endpoint prediction reduces mean absolute duration error from 12.471 to 3.080 frames compared with a fixed-length cutoff. We further evaluate robot execution using a pretrained, frozen GRIT tracker: 409 of 500 generated references (81.8%) pass the posture-based stability screen in MuJoCo. Following simulation screening and manual selection, 26 of 27 attempted motions are judged successful on the real G1.

関連論文

PR本紙発行元 EmplifAI