日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
全身制御arXiv:2608.18234

GigaBrain-WBC-0.5:環境との相互作用に頑健な全身制御のための行動世界モデル

GigaBrain-WBC-0.5: A Behavior World Model for Robust Whole-Body Control with Environment Interaction

シェア:XThreadsFacebookLINEはてブBluesky

ヒューマノイドの全身運動追跡制御において、環境との接触を考慮した行動世界モデルを提案し、不適切なコマンドや外乱に対して頑健な制御を実現した。

詳しい要約

1. どんなもの?

GigaBrain-WBC-0.5は、ヒューマノイド全身制御のための最初のBehavior World Model (BWM)を提案する。従来の全身運動追跡ポリシーは平らな地面でのみ機能し、環境との接触がダイナミクスを変えることを学習しない。本手法は、因果Transformerを用いて、次の行動、次の状態、次の潜在行動コマンドの分布を同時に予測する。これにより、行動するネットワークが環境が次に何ができるかをどう形作るかをモデル化する。自動地形アノテーションパイプラインにより、既存のモーションデータセット規模での地形アノテーションを可能にする。予測分布はデプロイ時にオンラインで非現実的なコマンドを検出し、学習済み行動に引き戻すために再利用され、ロボットは「ベストエフォート」でタスクを試みる。結果として、リアルタイムコマンド、環境との相互作用、非現実的なコマンド、転倒、外乱に対する堅牢性を備えた統一ポリシーを実現する。

2. 先行研究と比べてどこがすごい?

既存の全身トラッカーは平らな地面でのみ動作し、空のシーンで訓練されるため、地形や物体との接触がダイナミクスをどう変えるかを学習しない。また、参照モーションコーパスを拡大してバランスを教えようとするが、実行可能な行動が環境依存になると機能しなくなる。GigaBrain-WBC-0.5は、行動と環境モデリングを統合した初のBWMであり、純粋な反応型トラッカーではなく、次の行動・状態・潜在コマンド分布を予測する。これにより、環境との相互作用を考慮した堅牢な制御を実現し、非現実的なコマンドや転倒、外乱に対しても頑健である。

3. 技術・手法の肝は?

手法の核は、因果Transformerを用いて次の行動、次の状態、次の潜在行動コマンドの分布を同時に予測する点にある。これにより、行動するネットワークが環境の影響をモデル化する。また、自動地形アノテーションパイプラインにより、リターゲットされたモーションから完全な3D接触形状を復元し、既存のモーションデータセット規模での地形アノテーションを可能にする。デプロイ時には、予測分布を用いて非現実的なコマンドをオンラインで検出し、学習済み行動に引き戻すことで、ロボットが「ベストエフォート」でタスクを試みる。

4. どうやって有効だと検証した?

3つの大規模トラッカーベースラインと比較し、4つのレジームすべてで最高の成功率を達成した。地形相互作用では81.3%(最強ベースラインの4.3倍)、非現実的なコマンド下では83.1%、転倒回復では99.3%(最強ベースラインの16.8倍)を記録した。ハードウェア試験では、支持欠落や外乱下での堅牢な相互作用を示し、Unitree G1チェックポイントは簡単なファインチューニングでMaker L01ロボットに転移した。

5. 議論はある?

要旨からは、提案手法の限界や潜在的な欠点についての議論は明示されていない。ただし、BWMの概念は新しいが、そのスケーラビリティや実世界の多様な環境への一般化についてはさらなる検証が必要かもしれない。また、自動地形アノテーションパイプラインの精度や、予測分布の信頼性がどの程度コマンドの引き戻しに影響するかなど、詳細な分析は要旨からは不明である。

6. 次に読むべき論文は?

要旨で参照されているベースラインは「3つの大規模トラッカーベースライン」とあるが、具体的な名称は不明。関連手法として、全身運動追跡ポリシー、Behavior World Model、地形アノテーション、因果Transformerを用いた予測モデルなどが挙げられる。次に読むべき論文としては、ヒューマノイド全身制御の既存研究や、World Modelを用いたロボット制御の研究が考えられるが、要旨からは特定の論文名は挙げられていない。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Ziyang Cheng, Tianshu Tang, Jinxin Lan, Xinze Chen, Yuhan Gong, Zhichao Liu, Changzhong Wu, Yahao Mao, Zongyan Deng, Mingxuan Ma, Huasen Xi, Yilong Liu, Yutong Wu, Xiaofeng Wang, Yang Wang, Yun Ye, Guan Huang, Xiaojie Jin, Zheng Zhu, Jiwen Lu

分類: cs.RO, cs.AI, cs.LG

原文アブストラクト

Whole-body motion tracking policies turn a humanoid into a robust control interface: the teleoperator---or an upstream model---only supplies a coarse movement intent, while the low-level policy keeps the robot balanced and physically feasible. Existing trackers deliver this interface only on flat ground: trained in empty scenes, they never learn how contact with terrain and objects reshapes their dynamics, and they attempt to teach the policy to balance under any command by continually enlarging the reference-motion corpus, which stops working once feasible behaviors become environment-dependent. We present GigaBrain-WBC-0.5, the first Behavior World Model (BWM) for humanoid whole-body control. Rather than a purely reactive tracker, we train a causal Transformer to jointly predict its next action, next state, and the distribution over its next latent behavior command, so the network that acts also models how the environment shapes what it can do next. An automatic terrain-annotation pipeline recovers full 3D contact geometry from retargeted motion, enabling terrain annotation at the scale of existing motion datasets. The predicted distribution is reused at deployment to detect implausible commands online and retract them onto learned behaviors, so the robot attempts tasks in a "best-effort" manner. The result is a unified policy that takes real-time command, interacts with environment, and stays robust to implausible commands, falls, and disturbances. GigaBrain-WBC-0.5 achieves the highest success rate across all four regimes among three large-scale tracker baselines: 81.3% on terrain interaction (4.3x the strongest baseline), 83.1% under implausible commands, and 99.3% fall recovery (16.8x the strongest baseline). Hardware trials show robust interaction under missing supports and disturbances; the Unitree G1 checkpoint transfers to the Maker L01 robot with simple fine-tuning.

関連論文