日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
ヒューマノイド動作生成arXiv:2610.21515

TRACE: ヒューマノイド動作拡散のための型付き参照認識対話編集

TRACE: Typed Reference-Aware Conversational Editing for Humanoid Motion Diffusion

シェア:XThreadsFacebookLINEはてブBluesky

Unitree G1ヒューマノイドの動作生成・編集を、型付きの運動学的量(支持・ルート・手のイベント)に基づいて行うフレームワーク。言語指示を具体的な動作構造に結びつけ、参照動作に対する相対的な編集を可能にする。

詳しい要約

1. どんなもの?

言語条件付きの humanoid motion 生成と編集を統合した TRACE を提案する。対象は Unitree G1 humanoid robot で、typed で測定可能な kinematic quantities を基盤とする。生成では language model が motion 由来の supervision から support, root, hand events を予測し、それらの time-aligned encodings が元の text を補完して diffusion generator に入る。編集では typed requests が body-time scopes と source-relative goals を定義し、reference-conditioned diffusion editor が revised events と共に変更を実現する。

2. 先行研究と比べてどこがすごい?

比較手法に対し semantic alignment と motion quality が向上したと定量評価と人間評価で示す。motion-grounded conditioning と kinematic consistency の有効性を controlled ablations が支持する。multi-turn editing 評価では、共有された preservation constraints の下で連続する相対的リクエストの実行がより信頼できることを示す。

3. 技術・手法の肝は?

typed で測定可能な kinematic quantities を共通基盤とする。生成条件を paired training motions に、編集目標を current motion に接地する。language model が support, root, hand events を motion-derived supervision から予測し、time-aligned encodings を text と共に diffusion generator へ与える。gravity-referenced states と trajectory-contact objectives で kinematic consistency を改善する。編集では typed requests が body-time scopes と source-relative goals を定義し、reference-conditioned diffusion editor が revised events を用いて変更を実現、sampling-time projection が protected s…

4. どうやって有効だと検証した?

定量評価と人間による評価を実施し、比較手法より semantic alignment と motion quality が向上した。controlled ablations で motion-grounded conditioning と kinematic consistency の価値を支持した。multi-turn editing 評価で、共有 preservation constraints 下の連続相対リクエストの実行信頼性を示した。

5. 議論はある?

typed kinematic structure が motion generation と reference-aware revision の共通基盤として有効であることを結果が支持する。一方、限界や失敗事例、計算コスト、他ロボットへの一般化については要旨からは不明。

6. 次に読むべき論文は?

要旨で参照・比較されている個別研究は明示されていない。関連手法として language-conditioned motion generation、diffusion-based motion synthesis、humanoid motion editing、reference-conditioned diffusion editing などが挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zejian Kang, Yifu Luo, Boyang Shen, Jingxuan Li, Zekai Chen, Zekun Shi, Yongxue Xu, Zhenyu Hou, Bingqian Wu, Shaolei Zhang, Wentao Yang, Xiangru Huang

分類: cs.RO

原文アブストラクト

Language-conditioned humanoid motion generation enables users to create and refine robot movements through natural language. The central challenge is to connect an underspecified request to concrete motion structure that can subsequently be revised relative to an accepted reference. We present TRACE, a generation and editing framework for the Unitree G1 humanoid robot built around typed, measurable kinematic quantities. Our insight is to ground generation conditions in paired training motions and editing goals in the current motion. A language model learns to predict support, root, and hand events from motion-derived supervision; their time-aligned encodings complement the original text in a diffusion generator. Gravity-referenced states and trajectory--contact objectives improve kinematic consistency. For editing, typed requests define body--time scopes and source-relative goals. A separate reference-conditioned diffusion editor uses these goals and revised events to realize changes, while sampling-time projection preserves protected state coordinates. Quantitative evaluation and human assessment show improved semantic alignment and motion quality over the compared methods. Controlled ablations support the value of motion-grounded conditioning and kinematic consistency, while multi-turn editing evaluations demonstrate more reliable execution of successive relative requests under shared preservation constraints. Together, these results support typed kinematic structure as a common basis for motion generation and reference-aware revision.

関連論文

PR本紙発行元 EmplifAI