日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2611.26519

ACE-Brain-0.7:実体エージェントのための実行に基づく推論学習

ACE-Brain-0.7: Learning Execution-Grounded Reasoning for Embodied Agents

シェア:XThreadsFacebookLINEはてブBluesky

視覚言語モデルACE-Brain-0.7を提案し、370万件のQAペアでファインチューニングすることで、空間認識と実行進捗の推論を統合し、複数のベンチマークでGPT-6 AstraやClaude Opus 5.5を上回る性能を達成した。

詳しい要約

1. どんなもの?

- 9B の vision-language model「ACE-Brain-0.7」の提案 - spatial grounding、task understanding、progress estimation を統合 - 長期的 embodied タスクの実行状態に基づく推論を狙う - 学習用に 3.7M の question-answer pairs を構築 - egocentric human videos、robot episodes、simulation から実行監督を収集 - 実行の各段階を問い、task-level 判断と観測された progress/outcome を結びつける - ベースは Qwen3.5-9B を fine-tune

2. 先行研究と比べてどこがすごい?

- 6 つの公開 task-reasoning benchmarks で平均 76.5 - GPT-6 Astra の 72.7、Claude Opus 5.5 の 73.5 を上回る - spatial grounding でも評価モデル中トップ - 7 benchmarks 平均 75.90、RefCOCOg で Acc@0.5 91.25 - 閉源モデルと比較して遜色ない性能を主張 - 詳細な先行研究との差分は要旨からは不明

3. 技術・手法の肝は?

- 9B の vision-language model に 3 つの能力を統合 - spatial grounding、task understanding、progress estimation - 3.7M の QA pairs を curated - egocentric human videos、robot episodes、simulation から execution supervision を抽出 - 実行段階ごとの質問で task-level 判断と progress/outcome を接続 - Qwen3.5-9B を上記データに加え task、spatial-grounding、progress-estimation 用データで fine-tune

4. どうやって有効だと検証した?

- 6 つの公開 task-reasoning benchmarks で平均 76.5 を記録 - GPT-6 Astra、Claude Opus 5.5 と比較 - spatial grounding を 7 benchmarks で評価、平均 75.90 - RefCOCOg で Acc@0.5 91.25 - controlled evaluations で task-only model が visual history をより有効活用し、execution states をより正確に区別することを示す

5. 議論はある?

- 結果は spatial perception と temporal understanding の統合が execution-grounded reasoning に有効と主張 - 閉源モデルとの比較で優位性を示すが、詳細な限界や失敗事例は要旨からは不明 - controlled evaluations の具体的設定や規模は要旨からは不明

6. 次に読むべき論文は?

- GPT-6 Astra - Claude Opus 5.5 - Qwen3.5-9B - RefCOCOg 関連の spatial grounding 研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yinhe Wang, Shijun Shi, Feng Pan, Tao Tao, Wei Mao, Jiangning Zhang, Zhiyao Ren, Yihang Jiao, Haoming Gu, Yunpeng Qing, Jiyu Guo, Zhi Hou, Dacheng Tao, Xiaogang Wang

分類: cs.RO

原文アブストラクト

Reliable reasoning for long-horizon embodied tasks requires predictions grounded in the observed execution state. We present ACE-Brain-0.7, a 9B vision--language model that combines spatial grounding, task understanding, and progress estimation. To train the model, we curate 3.7 million question--answer pairs, drawing execution supervision from egocentric human videos, robot episodes, and simulation. These questions span different stages of an execution and connect task-level judgments with observed progress and outcomes. We then fine-tune Qwen3.5-9B on this collection together with additional task, spatial-grounding, and progress-estimation data. Across six public task-reasoning benchmarks, ACE-Brain-0.7 achieves an average score of 76.5, ahead of GPT-6 Astra at 72.7 and Claude Opus 5.5 at 73.5. Our model also leads the evaluated models in spatial grounding, averaging 75.90 across seven benchmarks and reaching 91.25 Acc@0.5 on RefCOCOg. Controlled evaluations further indicate that our task-only model makes more effective use of visual history and more accurately distinguishes execution states. Together, these results show that ACE-Brain-0.7 effectively combines spatial perception with temporal understanding, delivering strong execution-grounded reasoning and comparing favorably with closed-source models.

関連論文

  1. 1パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  2. 2川崎重工業のロボット外販を報道新製品・発表
  3. 3Boston Dynamics、GlobalFoundriesでAtlasを試験へ 半導体製造で2027年初頭から半導体・GPU
  4. 4丸文、RealManのロボットアームやヒューマノイドを国内販売提携・買収
  5. 5NVIDIA、SC26で科学研究向けAIエージェントとHPC基盤を発表新製品・発表

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI