日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
移動操作arXiv:2610.30876

LocoManiLab:ヒューマノイド移動操作のためのデータ・方策・制御・実機展開を統合したテストベッド

LocoManiLab: A Unified Testbed for Data, Policies, Controllers, and Deployment in Humanoid Loco-Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

ヒューマノイドの移動操作研究をデータ収集から学習・評価・実機展開まで一貫して扱う統合テストベッドを構築し、234タスク・12方策・複数制御器での比較評価とsim2realの妥当性を検証した。

詳しい要約

1. どんなもの?

- LocoManiLabはhumanoid robotのloco-manipulation(移動と操作の協調)のための統合testbed - データ収集・生成、policy学習、評価、実機deploymentまでを一貫して扱う - 234のatomic/compositionalタスクを5つのhousehold sceneカテゴリで提供 - 51.5時間のsimulated teleoperationデータを含む - 12 policyを共通controllerで評価し、task/scene splitやperturbation levelも検討

2. 先行研究と比べてどこがすごい?

- 従来はpolicy・controller・タスク設定が異なり進捗評価が困難だった - 単一testbedでデータ生成から実機deploymentまでを統合した点が特徴 - 共通controller下で多数のpolicyを横断比較できる評価設計 - demonstration scaleやdata-source mixtureの検討も含む - 具体的な先行研究名との比較は要旨からは不明

3. 技術・手法の肝は?

- 5カテゴリのhousehold sceneにわたる234タスクのtask suiteを構築 - simulated teleoperationによる51.5時間のデータ収集 - 共通controllerの下で12 policyをtask/scene split・perturbation level別に評価 - 5 controllerにわたる2 policyの比較、demonstration scaleとdata-source mixtureの検討 - humanoid motion generation modelをloco-manipulation向けにfine-tuneし、データ生成pipelineへ統合

4. どうやって有効だと検証した?

- 12 policyの評価でunseen task/sceneにおけるsuccess rate低下を確認 - visual perturbation増加に伴う性能低下と、policy間のgeneralization/robustness差を観察 - 実世界設定に近い3つのsimulated loco-manipulationタスクで3 policyをsim/real両方で評価 - 両domainで類似のpolicy rankingが得られ、simulation評価の信頼性を支持

5. 議論はある?

- unseen task/sceneでのsuccess rate低下が課題として示唆される - visual perturbationに対するrobustnessがpolicy間で異なる - motion generation modelの出力とtask実行要件のalignment、pipeline統合を検討 - sim/realのpolicy ranking一致はsimulation評価の妥当性を支持するが、対象は3タスク・3 policyに限られる - その他の限界や議論は要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照/比較されている具体的な先行研究は明示されていない - 関連手法としてhumanoid loco-manipulationのpolicy学習、sim-to-real transfer、simulated teleoperationによるdata generation、humanoid motion generation model、visual perturbationへのrobustness評価に関する研究が候補 - 同分野の定番としてsim-to-real transferやimitation learning、domain randomizationの関連研究を参照すべき

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Dewei Wang, Jinrui Han, Jiyuan Shi, Chenyun Zhang, Xianbo Lu, Jiabao Wu, Jiqin Feng, Jipeng Kong, Ping Luo, Chenjia Bai, Xuelong Li

分類: cs.RO

原文アブストラクト

Humanoid robots must coordinate locomotion and manipulation in everyday environments, yet progress is difficult to assess across differing policies, controllers, and task settings. LocoManiLab provides an integrated testbed spanning data collection and generation, policy training, evaluation, and physical deployment. Its task suite covers 234 atomic and compositional tasks across five household scene categories, supported by 51.5 hours of simulated teleoperation. The evaluation covers twelve policies with a shared controller across task and scene splits and perturbation levels, two policies across five controllers, and studies of demonstration scale and data-source mixtures. Success rates fall on unseen tasks and scenes and generally decline as visual perturbations increase, with differences in generalization and robustness across policies. For data generation, a humanoid motion generation model is fine-tuned for loco-manipulation to study the alignment of its outputs with task execution requirements and its integration into the data generation pipeline. Three simulated loco-manipulation tasks closely match real-world setups, enabling evaluation of three policies in both domains. Similar policy rankings support the reliability of simulation-based evaluation.

関連論文

PR本紙発行元 EmplifAI