日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
歩行arXiv:2609.24145

MimicAgent: プロンプトから軌道生成による四足歩行スキルの獲得

MimicAgent: Quadruped Skills via Prompt-to-Trajectory Generation

シェア:XThreadsFacebookLINEはてブBluesky

スキルを表すプロンプトからコーディングエージェントで四足ロボットの参照軌道を生成し、それを用いた模倣強化学習で実機展開可能な動的スキルを学習するフレームワークを提案。

詳しい要約

1. どんなもの?

- 四足歩行の動的スキルを学習するためのprompt-to-trajectory生成フレームワークMimicAgentを提案。 - スキルプロンプトからcoding agentsを用いて四足の参照軌道を生成し、example-guided RLで方策を訓練。 - 生成された粗い参照軌道はシミュレーションと実世界で展開可能な方策の訓練に使用。

2. 先行研究と比べてどこがすごい?

- 従来のreward shapingは報酬設計が難しく、EurekaのようなLLMによる自動報酬設計も多様なスキルや形態への汎化が困難。 - 人間やLLMにとって報酬関数の設計より参照動作の生成が容易であるという観察に基づく。 - ヒューマノイドでは大規模モーションキャプチャデータを参照とするexample-guided RLが成功しているが、四足にはそのような参照動作データが不足。 - MimicAgentはcoding agentsを活用して四足の参照軌道を生成し、このギャップを埋める。

3. 技術・手法の肝は?

- agentic harnessを提案し、スキルプロンプトからcoding agentsを用いて四足の参照軌道を生成。 - 生成された粗い参照軌道をexample-guided RLの参照として利用し、方策を訓練。 - 訓練された方策はシミュレーションと実世界で展開可能。 - Claude Fable 5.1をagentic harness内でプロンプトすると、87%のプロンプトが意味的に整合した参照軌道を生成。

4. どうやって有効だと検証した?

- 生成された参照軌道を用いて訓練した方策がシミュレーションと実世界で展開可能であることを確認。 - Claude Fable 5.1をagentic harness内でプロンプトした際、87%のプロンプトが意味的に整合した参照軌道を生成することを発見。 - 具体的なタスクや評価指標の詳細は要旨からは不明。

5. 議論はある?

- 報酬設計の困難さとLLMによる自動報酬設計の汎化限界を指摘。 - 参照動作生成の容易さを利用するアプローチの有効性を示唆。 - 四足における参照動作データの不足という課題に対処。 - 限界や今後の課題についての議論は要旨からは不明。

6. 次に読むべき論文は?

- Eureka (LLMによるreward designの自動化) - example-guided RL for humanoids (ヒューマノイドにおけるexample-guided RL) - 大規模motion capture datasetsを利用したlocomotion policy学習 - coding agentsを活用したロボティクス応用

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Lucky Kant Nayak, Narayanan Palghat Parameswaran, Neehar Peri, Deva Ramanan

分類: cs.RO

原文アブストラクト

We present MimicAgent, a prompt-to-trajectory generation framework for learning dynamic quadruped skills. Although reward shaping is extensively used when training quadruped policies, navigating the resulting reward landscape is notoriously difficult, requiring hours of "graduate student descent". Eureka attempts to automate reward design with LLMs, but we find that it struggles to generalize across diverse skills and morphologies. Our key observation is that it is far easier for a human - and by association, an LLM - to generate reference motions than to shape reward functions. Our hypothesis is motivated by the success of example-guided RL for humanoids, which exploits large-scale motion capture datasets as references for training locomotion policies. Unlike humanoids, quadrupeds lack such reference motion data. Towards this end, we propose MimicAgent, an agentic harness that, given a skill prompt, generates quadruped reference trajectories with coding agents. These coarse reference trajectories are then used to train example-guided RL policies that are deployable in simulation and in the real-world. Notably, we find that when prompting Claude Fable 5.1 within our agentic harness, 87% of prompts yield semantically aligned reference trajectories.

関連論文

PR本紙発行元 EmplifAI