arXiv論文「Flow-Matched Motion Priors」を公開　Unitree G1で0.727m/sの歩行を報告

何が起きたか

arXivは2026-09-14、模倣学習向けの報酬手法「Flow-Matched Motion Priors（FMP）」に関する論文を公開した。論文は、現在の方策の挙動を示範運動へ近づけるオンラインのスカラー報酬を、flow matchingと最適輸送を使って学習する枠組みを提案している。Unitree G1では、50-million-transitionの実験でAMP、barycentric OT報酬、各種アブレーションと比較し、前進歩行の結果を示した。

詳細

論文は、エージェントの現在のロールアウト履歴と専門家の動作バンクを結ぶ経路上で、entropic OTにより対応付けを行い、その後、ロールアウトから専門家への経路に沿って神経ポテンシャルをflow matchingで学習すると説明している。学習には、endpoint-gradient supervisionとrelative-value calibrationも用い、actorには物理観測のみを入力し、報酬はAMPと同様にスカラーのまま維持するという。 実験面では、Unitree G1上で50-million-transitionの比較を行い、示範リセット条件では0.727 m/s、固定デフォルト姿勢条件では0.338 m/sの安定した前進歩行を報告した。固定姿勢条件では、endpoint-only controlの243回に対し、FMPは129回の転倒だった。静的なscore-gradient teacherとの比較では、動的FMが補間割合0.25と0.50でscore-increment errorを下げ、offline fitting timeも29%短かったとしている。

Key Facts

本紙の見方

この論文の新規性は、模倣学習の報酬を「判別器で真偽を分ける」AMP型ではなく、rollout履歴とexpert motion bankを結ぶ経路上でflow matchingにより学習する点にある。特に、最適輸送をそのままbarycentric targetにすると歩容の位相を平均してしまい、関節運動が弱くなるという問題設定を置き、その回避策としてentropic OTの対応付けと相対値較正を組み合わせている。これは単なるロボット歩行の性能比較ではなく、報酬設計の作り方そのものを変える提案だと読める。 本紙の関連記事はないため、過去報道との連続性は置かずに見る必要がある。ただし、本文の比較対象としてAMP、barycentric OT reward、endpoint-only control、static score-gradient teacherが明示されており、FMPは既存の報酬学習の弱点をどこで補うかが焦点になっている。数値面では、50-million-transitionという比較の土台、0.727 m/sと0.338 m/sという到達速度、129回と243回という転倒差が示されており、少なくともこの実験条件では固定初期姿勢からでも歩行を立ち上げやすいことが示唆される。 業界構造への含意としては、模倣学習の競争軸が「モデルを大きくすること」だけでなく、報酬をどう設計し、実機に近い観測だけで安定した方策へつなぐかに移っている点が重要である。actorが物理観測のみを使い、報酬はスカラーのままという設計は、学習時の教師信号を複雑にしすぎずに、実機適用のしやすさを保とうとする構造だとみられる。一方で、論文が示したのはUnitree G1上の比較結果であり、他機種や他動作への一般化、50-million-transition以外での再現性、報酬モデルの学習コストと実運用コストの分離はなお確認が必要である。次に見るべきなのは、歩行以外のタスクで同じ報酬設計が機能するか、固定姿勢以外の初期条件でも転倒差が保たれるか、そして学習済み報酬が他のロボット本体に移植できるかどうかである。

なぜ重要か

論文が示すのは、Unitree G1のような物理ロボットで、示範運動に近づく報酬を判別器以外の方法で設計しうるという点である。実機に近い観測だけで学習し、固定初期姿勢でも129回の転倒に抑えたとする結果は、模倣学習の報酬設計が歩行制御の安定性に直結することを示している。