日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2611.26420

Awaken-HI: 全身の人間経験でヒューマノイド知能をスケールさせる

Awaken-HI: Scaling Humanoid Intelligence with Whole-Body Human Experience

シェア:XThreadsFacebookLINEはてブBluesky

約5万時間の一人称視点ステレオ動画と同期した全身人間動作データを構築し、人間の動作軌道を共有アクションエキスパートに直接教師信号として与えるVLAモデルAwaken-HIを提案。実機で平均成功率93.75%を達成し、GR00T N1.7やπ0.5を上回った。

詳しい要約

1. どんなもの?

- Awaken-HI は humanoid の loco-manipulation 向け vision-language-action model。 - 人間の whole-body 動作と retarget 済み robot action を shared action expert で同時予測する。 - 基盤データセット Awaken-Human を構築。 - 約 50,000 時間の egocentric stereo video と同期 whole-body human motion を含む。 - 100 以上の skill をカバー。 - 目的は人間の日常作業スキルを humanoid に転移し、家庭・職場での実作業を可能にすること。

2. 先行研究と比べてどこがすごい?

- 既存の egocentric video dataset は活動を広く含むが、大規模な loco-manipulation 学習用の同期 whole-body motion data が乏しい。 - Awaken-Human は約 50,000 時間の egocentric stereo video と同期 whole-body human motion を約 100 以上の skill にわたり提供する点が異なる。 - 人間軌跡が shared action expert を直接監督する設計により、人間から humanoid への loco-manipulation skill 転移がより効果的になると示す。 - 実機 8 タスクで平均成功率 93.75% を達成し、GR00T N1.7 と π_{0.5} を個別タスク・long-horizon 評価の両方で上回る。

3. 技術・手法の肝は?

- Awaken-HI は vision-language-action model で、humanoid loco-manipulation を対象とする。 - 核心は shared action expert が元の human motion と retarget 済み robot action を jointly に予測すること。 - 人間の軌跡が shared action expert を直接監督する形で学習する。 - 大規模 human pretraining の後、T800 への adaptation を行う。 - データは Awaken-Human の egocentric stereo video と同期 whole-body human motion を用いる。

4. どうやって有効だと検証した?

- 人間 pretraining data を増やすと held-out robot action prediction error が empirical scaling law に従って減少することを示す。 - 同様に downstream の実ロボットタスク平均成功率が向上することを確認。 - full-corpus pretraining と T800 adaptation 後、8 個別タスクで平均成功率 93.75% を達成。 - GR00T N1.7 と π_{0.5} との比較を個別タスクおよび long-horizon 評価で実施し、上回ることを示す。 - robot post-training で未見の物体や、既知物体と目的地の新しい組み合わせにも同一 policy が汎化することを確認。

5. 議論はある?

- 人間の whole-body 軌跡で shared action expert を直接監督することが転移に有効であると主張。 - 人間 pretraining data の規模拡大が robot action prediction error の低下と実機成功率の向上につながる empirical scaling law を示す。 - 未見物体や新規の物体-目的地ペアへの汎化を報告。 - 限界・失敗事例・計算コスト・データ収集バイアスなど詳細な議論は要旨からは不明。

6. 次に読むべき論文は?

- GR00T N1.7(比較対象の humanoid VLA) - π_{0.5}(比較対象の vision-language-action model) - egocentric video dataset を用いた human-to-robot skill transfer 関連研究 - human motion retargeting を用いた humanoid loco-manipulation 学習 - vision-language-action model の scaling law に関する研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: EngineAI

分類: cs.RO, cs.AI, cs.CV

原文アブストラクト

A central goal of humanoid robotics is for robots to perform the everyday work people do in homes and workplaces. Existing egocentric video datasets cover many of these activities but provide little synchronized whole-body motion data for learning loco-manipulation at scale. We build Awaken-Human, which pairs approximately 50,000 hours of egocentric stereo video with synchronized whole-body human motion and covers more than 100 skills. Building on this, we also introduce Awaken-HI (Humanoid Intelligence), a vision-language-action model for humanoid loco-manipulation that jointly predicts original human motion and retargeted robot actions through a shared action expert. We show that loco-manipulation skills transfer more effectively from people to humanoids when human trajectories directly supervise the shared action expert. Increasing human pretraining data reduces held-out robot action prediction error according to an empirical scaling law and raises the mean success rate on downstream real-robot tasks. After full-corpus pretraining and T800 adaptation, Awaken-HI achieves a mean success rate of 93.75% across eight individual tasks and outperforms GR00T N1.7 and $π_{0.5}$ in both individual and long-horizon evaluations. The same policy generalizes to objects unseen during robot post-training and to new pairings of familiar objects and destinations.

関連論文

  1. 1パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  2. 2川崎重工業のロボット外販を報道新製品・発表
  3. 3Boston Dynamics、GlobalFoundriesでAtlasを試験へ 半導体製造で2027年初頭から半導体・GPU
  4. 4丸文、RealManのロボットアームやヒューマノイドを国内販売提携・買収
  5. 5NVIDIA、SC26で科学研究向けAIエージェントとHPC基盤を発表新製品・発表

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI