日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
両腕マニピュレーションarXiv:2610.26507

スケジュールではなくタスクを学ぶ:両腕模倣学習における偽の腕間結合の低減

Learn the Task, Not the Schedule: Reducing Spurious Cross-Arm Coupling in Bimanual Imitation Learning

シェア:XThreadsFacebookLINEはてブBluesky

両腕模倣学習において、タスクに必要な腕間制約と偶発的なスケジュール選択を区別するため、記録済みの腕ローカルな内容を保ちつつ時間再編成する学習時データ介入CTRを提案し、実機で最悪状態成功率を56%から76%に改善した。

詳しい要約

1. どんなもの?

- 両腕模倣学習(bimanual imitation learning)におけるspurious cross-arm coupling(タスクに不要な腕間の時間的結合)を低減する手法Constraint-preserving Temporal Recombination (CTR)を提案する研究。 - 両腕デモは「何をするか」と「各腕がいつ動くか」のスケジュールの両方を含むが、標準的な模倣学習は両者を区別せず、反対腕の進捗をショートカット手がかりとして利用しうる点を問題視。 - CTRは訓練時のデータ介入により、腕ローカルのセンサ運動内容を保ちつつ、タスク必須の腕間制約を満たす許容スケジュールへ再タイミングする。 - Diffusion Policy、Action Chunking with Transformers、$π_{0.5}$に適用し、シミュレーション4タスク・実機4タスクで評価。

2. 先行研究と比べてどこがすごい?

- 標準的な模倣学習やスケジュール混合(schedule mixture)ベースラインは、記録された特定スケジュールに依存し、タスクに不要な腕間結合を学習しうる。 - CTRは「タスク必須の腕間制約」と「偶発的なスケジュール選択」を分離し、後者のみを再タイミングで多様化する点が新しい。 - 実機6つの両腕進捗状態初期化で、最良の非CTRスケジュール混合のworst-state成功率56%に対しCTRは76%へ改善。 - $π_{0.5}$のIndependentタスクで、Concurrentスケジュール分布では4s停止が反対腕へ2.56sの遅延を伝播するが、CTRでは0.25sに抑制。 - 実機でタスク制約違反がCTRは0–4%に対し、狭スケジュールベースラインは36–98%。

3. 技術・手法の肝は?

- Constraint-preserving Temporal Recombination (CTR):訓練時のデータ介入。 - 記録済みの腕ローカルなセンサ運動内容(arm-local sensorimotor content)を保持したまま、対応するセグメントを再タイミングし、タスク必須の腕間制約を保つ許容スケジュールを実現。 - これにより、反対腕の進捗をショートカット手がかりとして使うspurious cross-arm couplingを低減。 - Diffusion Policy、Action Chunking with Transformers、$π_{0.5}$といったポリシーに適用可能な訓練時データ拡張として設計。

4. どうやって有効だと検証した?

- シミュレーション4タスク・実機4タスクで評価。 - ポリシーはDiffusion Policy、Action Chunking with Transformers、$π_{0.5}$を使用。 - 実機6つの両腕進捗状態初期化でworst-state成功率を比較(CTR 76% vs 最良非CTR 56%)。 - $π_{0.5}$のIndependentタスクで、Concurrentスケジュール分布下の4s停止が反対腕へ与える遅延を測定(2.56s vs CTR 0.25s)。 - 実機でのタスク制約違反率を比較(CTR 0–4% vs 狭スケジュールベースライン36–98%)。

5. 議論はある?

- 要旨からは不明(CTRの限界、適用条件、計算コスト、実機タスクの詳細な議論は要旨に明記されていない)。 - 示唆として、スケジュール混合では不十分で、タスク制約を保った再タイミングが重要である点が議論の中心。 - 実機での制約違反率の差は、狭スケジュールベースラインがスケジュール依存のショートカットを学習することを示唆。

6. 次に読むべき論文は?

- Diffusion Policy(比較対象ポリシー) - Action Chunking with Transformers (ACT)(比較対象ポリシー) - $π_{0.5}$(比較対象ポリシー) - スケジュール混合(schedule mixture)ベースライン - 両腕模倣学習(bimanual imitation learning)およびspurious correlation/shortcut learningに関する研究 - コード: https://github.com/MINT-SJTU/CTR

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Shuyuan Hu, Deng-Ke Wu, Yifan Jin, Qianhang Luo, Mingchen Ju, Kai Ye, Bo Zhao

分類: cs.RO, cs.AI, cs.LG

原文アブストラクト

A bimanual demonstration specifies both what the robot should do and one particular schedule for when each arm should act. Standard imitation learning does not distinguish task-required cross-arm constraints from incidental scheduling choices, and may therefore exploit opposite-arm progress as a shortcut cue, creating spurious cross-arm coupling even where relative timing is irrelevant for the current task phase. We introduce Constraint-preserving Temporal Recombination (CTR), a training-time data intervention that preserves recorded arm-local sensorimotor content while retiming the corresponding segments to realize admissible schedules that preserve task-required cross-arm constraints. We use CTR to train Diffusion Policy, Action Chunking with Transformers, and $π_{0.5}$, and evaluate them on four simulated and four real-robot tasks. Across six real-robot bimanual progress-state initializations, CTR raises worst-state success from 56% for the strongest non-CTR schedule mixture to 76%. With $π_{0.5}$ on an Independent task, a 4 s pause transfers 2.56 s of delay to the opposite arm under the Concurrent schedule distribution, but only 0.25 s with CTR. On real robots, CTR violates task constraints in only 0--4% of trials, versus 36--98% for narrow-schedule baselines. Code will be released at https://github.com/MINT-SJTU/CTR.

関連論文

PR本紙発行元 EmplifAI