日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
動的マニピュレーションarXiv:2609.25689

MotionForge:動的物体の長期的操作のためのデータ生成パイプラインと大規模ベンチマーク

MotionForge: A Data Generation Pipeline and Large-Scale Benchmark for Long-Horizon Manipulation of Dynamic Objects with Domain Shifts

シェア:XThreadsFacebookLINEはてブBluesky

動的環境でのロボット操作を評価するため、11種類の運動パターンを含む40タスクと長期タスク17件を備えた大規模シミュレーションベンチマークとデータ生成パイプラインを提案し、ドメインシフト下での汎用ポリシーの限界を明らかにした。

詳しい要約

1. どんなもの?

- MotionForgeは、dynamic manipulationにおけるdomain shiftsとlong-horizon interactionを同時に評価するための、初の大規模simulation benchmarkおよびdata-generation pipeline。 - 40のdynamic interaction tasks(11のmotion patterns)と、17のlong-horizon tasksを専用サポート。 - 2つの新規性:(1) single-factorおよびjoint domain shifts下でのpolicy robustnessを評価するsystematic evaluation protocol、(2) 環境がpolicy inference timeとは独立に連続進化するdecoupled, latency-aware execution protocol。

2. 先行研究と比べてどこがすごい?

- 従来のlearning-based robot policiesは主にstaticまたはquasi-static環境で評価されていた。 - 最近のdynamic simulation benchmarksは、short-horizonでreactiveなinteractionに焦点を当て、単純なmotion patternsが中心で、domain shifts下のsystematic evaluationやmodel-agnostic real-time execution protocolsのサポートが限定的だった。 - MotionForgeは、domain shiftsとlong-horizon interactionをjointlyに評価する初の大規模simulation benchmarkであり、上記のギャップを埋める。

3. 技術・手法の肝は?

- 40のdynamic interaction tasks(11のmotion patterns)と17のlong-horizon tasksを含む大規模benchmarkを構築。 - domain shifts評価のため、single-factor(例:backgroundsのみ)とjoint(例:objects, backgrounds, lighting, speedの同時変化)のsystematic evaluation protocolを導入。 - 環境がpolicy inference timeに依存せず連続的に進化するdecoupled, latency-aware execution protocolを採用。 - data-generation pipelineを提供。

4. どうやって有効だと検証した?

- representative general-purpose robot policiesをbenchmark上でextensiveに評価。 - joint domain shifts下でsubstantial limitationsが明らかになった。 - これらの結果から、現在のpolicy能力と、domain shifts下でのrobust long-horizon manipulation of dynamic objectsの要件との間にcritical gapがあることを示した。

5. 議論はある?

- 現在のgeneral-purpose robot policiesはjoint domain shifts下で大きな限界を示す。 - このことは、robust long-horizon manipulation of dynamic objects under domain shiftsに向けた今後のembodied AI研究のためのcomprehensive testbedとしてMotionForgeを位置づける。 - 具体的な議論の詳細や限界については要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている具体的な研究は明示されていない。 - 関連手法として、learning-based robot policies、dynamic simulation benchmarks、general-purpose robot policiesが挙げられる。 - 同分野の定番として、dynamic manipulation benchmarksやdomain randomization、sim-to-real transferに関する研究が次に読むべき候補。 - 要旨からは具体的な論文名は不明。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Mohan Liu, Dengchen Mei, Haotian Xian, Ruyang Han, Jiayi Sun, Xuanyu Chen, Haitian Zhang, Luxi Li, Kaimin Mao, Lin Wang

分類: cs.RO

原文アブストラクト

Recent advances in learning-based robot policies have demonstrated promising progress, yet they are predom- inantly evaluated in static or quasi-static environments. In dynamic manipulation, objects and scenes continuously evolve while the robot perceives, reasons, and acts. However, recent dynamic simulation benchmarks largely focus on short-horizon, reactive interactions with simple motion patterns and offer limited support for both systematic evaluation under domain shifts and model-agnostic real-time execution protocols. To bridge these gaps, we introduce MotionForge, the first large- scale simulation benchmark and data-generation pipeline tailored to jointly evaluate domain shifts and long-horizon interaction in dynamic manipulation. MotionForge comprises 40 dynamic interaction tasks spanning 11 distinct motion patterns, with dedicated support for 17 long-horizon tasks. Our benchmark introduces two key novelties: (1) a systematic evaluation protocol for assessing policy robustness under both single-factor (e.g., only backgrounds shift) and joint domain shifts (e.g., simultaneous shifts of objects, backgrounds, lighting, and speed); and (2) a decoupled, latency-aware execution protocol where the environ- ment continuously evolves independently of policy inference time. Extensive evaluations of representative general-purpose robot policies on our benchmark reveal substantial limitations under joint domain shifts. These findings expose a critical gap between current policy capabilities and the requirements of robust long- horizon manipulation of dynamic objects under domain shifts, establishing MotionForge as a comprehensive testbed for future research in embodied AI.

PR本紙発行元 EmplifAI