日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
VLAarXiv:2610.18867

EmbodiedEvo:物理的知能のための自己改善型コーディングエージェント

EmbodiedEvo: Self-improving Coding Agents for Physical Intelligence

シェア:XThreadsFacebookLINEはてブBluesky

コーディングエージェントが単一のPlaygroundシーンでのフィードバックを通じて再利用可能なスキルと教訓を進化させ、それを多様な新シーンに適用することで物理タスクの成功率を高める手法を提案。

詳しい要約

1. どんなもの?

物理世界向けの汎用エージェントを実現するため、物理知能を実行可能なコードとして表現する EmbodiedEvo を提案する。 - VLA モデルと異なり、コードをポリシー表現かつ作業空間として用いる。 - エージェントは計画・実行・検証の所定ワークフローに従わず、状態を自律的に検査し、コードを修正・実行し、フィードバックで次のステップを選ぶ。 - 単一の Playground シーンでのフィードバックを通じて再利用可能な Skills と Lessons を進化させ、その後 harness を凍結して多様な新シーンに適用する。

2. 先行研究と比べてどこがすごい?

VLA モデルは観測と言語指示を直接行動に写像するのに対し、コードは制御論理を明示的かつ再利用可能にする点が異なる。 - デジタル環境での SWE スタイルループの成功を物理タスクへ拡張する動機を示す。 - 物理実行は繰り返し失敗しやすいが、経験を保持・洗練する仕組みを導入する。 - RoboDojo-Sim で平均スコア 44.48、成功率 37.82% を達成し、公式検証済みの全結果を上回る。

3. 技術・手法の肝は?

コードをポリシー表現かつ作業空間として扱う coding agent を採用する。 - 計画・実行・検証の所定ワークフローではなく、状態検査、コード修正・実行、フィードバックに基づく次ステップ選択を自律的に行う。 - 単一 Playground シーンでのフィードバックを通じて再利用可能な Skills と Lessons を進化させる。 - その後 harness を凍結し、多様な新シーンに適用する。

4. どうやって有効だと検証した?

RoboDojo-Sim で評価し、平均スコア 44.48、成功率 37.82% を達成、公式検証済みの全結果を上回った。 - ペア検定で memory-dependent タスクで最大の向上、協調手順の再利用成功を示す。 - 強いモデルの経験が弱い実行者を改善:Astra の経験で Sol と Luna の成功率が経験なし比で 8.86 および 5.50 ポイント向上。 - 生の相互作用履歴と比べ、Skills と Lessons は同等のタスク性能を 53.0% 低い実行コストで達成。

5. 議論はある?

物理実行は繰り返し失敗しやすく、fine contact control は依然として困難である。 - memory-dependent タスクで最大の向上が見られ、協調手順の再利用が成功する一方、接触制御の難しさが残る。 - 強いモデルの経験が弱い実行者を改善する点、および Skills と Lessons が実行コストを 53.0% 削減する点が議論される。

6. 次に読むべき論文は?

要旨で参照/比較されている研究として VLA モデル、SWE スタイルループ、RoboDojo-Sim が挙げられる。 - 関連手法として Skills と Lessons、Astra、Sol、Luna が登場する。 - 同分野の定番として vision-language-action モデルや code-as-policy アプローチが考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Wenyi Li, Yizhe Chi, Youjie Zheng, Chunyu Liu, Xiaoqiu Wang, Mingju Gao, Zheng Jiang, Deyao Hong, Calvin Xiao, Kaisen Yang, Qinhuai Na

分類: cs.RO

原文アブストラクト

Bringing general-purpose agents into the physical world calls for an executable representation of physical intelligence. Compared with vision-language-action (VLA) models, which map observations and language instructions directly to actions, code makes control logic explicit and reusable. Code can serve not only as a policy representation but also as the workspace in which the agent solves a task. Rather than following a prescribed workflow of planning, execution, and verification, the agent can autonomously inspect the state, revise and execute code, and use feedback to choose the next step. The success of this SWE-style loop in digital environments motivates its extension to physical tasks. Yet physical execution remains prone to recurring failures. To retain and refine experience for later scenes, we introduce EmbodiedEvo, where a coding agent evolves reusable Skills and Lessons through feedback on a single Playground scene, then freezes the resulting harness for diverse new scenes. On RoboDojo-Sim, EmbodiedEvo achieves an average score of 44.48 and a success rate of 37.82\%, surpassing all officially verified results. Paired tests show the largest gains on memory-dependent tasks and successful reuse of coordinated procedures, while fine contact control remains difficult. Experience from stronger models also improves weaker executors: Astra's experience raises Sol and Luna's success rates by 8.86 and 5.50 percentage points over no experience. Compared with raw interaction history, Skills and Lessons achieve comparable task performance at 53.0\% lower execution cost.

関連論文

PR本紙発行元 EmplifAI