日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

VLAarXiv:2611.22592

アンカーパス整合による効率的な双腕マニピュレーションのためのワールドアクションモデル蒸留

Distilling World Action Models for Efficient Bimanual Manipulation via Anchored Path Matching

シェア:XThreadsFacebookLINEはてブBluesky

未来映像とロボット動作を同時生成するWorld Action Modelを、学生の到達状態から教師の終点と中間状態を目標に蒸留するAnchored Path Matchingを提案し、1/2/4ステップ生成を単一チェックポイントで実現、双腕操作の成功率と映像品質を向上させた。

詳しい要約

1. どんなもの?

- World Action Models (WAMs) を対象とした研究 - WAMs は反復 denoising により将来 video と robot action を同時生成するモデル - 本論文は WAMs の few-step distillation 手法 Anchored Path Matching (APM) を提案 - 目的は効率的な bimanual manipulation - 推論時の model evaluations を削減しつつ性能を維持 - 単一 checkpoint で 1-, 2-, 4-step の joint generation を可能にする - 評価は RoboTwin 2.0 と実ロボット2タスクで実施

2. 先行研究と比べてどこがすごい?

- 従来の few-step distillation は model evaluations を削減できるが、coarse updates により student が teacher の trajectory から外れる問題がある - APM は student が到達した状態から teacher を zero noise まで継続し、その endpoint と first intermediate state を教師信号に用いる - これにより student の実際の状態分布に沿った監督が可能 - 単一 checkpoint で複数の sampling budget を選択可能 - 再学習や teacher queries なしで deployment 時に選択できる点が従来と異なる - 1-step で continued base distillation 比 +2.0pt (Clean)、+1.4pt (Random) の closed-loop success 改善 - Video PSNR が 30.169 から 32.317 dB に向上、SSIM と LPI…

3. 技術・手法の肝は?

- Anchored Path Matching (APM) を提案 - student が到達した各状態から teacher を zero noise まで継続 - その endpoint と first intermediate state を target として使用 - Modality-routed adapters - 同一の starting state から endpoint と short-transition の両 target を学習 - 勾配衝突への対処 - 2つの gradient が conflict する場合、anchor-priority updates を適用 - endpoint gradient を保持し、各 modality 内で local gradient の opposing component を除去 - 単一 checkpoint で 1-, 2-, 4-step joint generation をサポート - sampling budget を deployment 時に選択可能

4. どうやって有効だと検証した?

- RoboTwin 2.0 で検証 - Clean demonstrations のみで学習し、domain-randomized Random setting で直接評価 - 1-step で continued base distillation 比 +2.0pt (Clean)、+1.4pt (Random) の closed-loop success - Video PSNR 30.169 から 32.317 dB へ向上、SSIM と LPIPS も改善 - 実ロボット2タスクで検証 - 1-step teacher 比で success 改善 - 8-step teacher 比で control-cycle latency を 21.3x 削減

5. 議論はある?

- 要旨からは不明 - 限界や失敗事例、計算コストの詳細な議論は要旨に記載なし - 勾配衝突時の anchor-priority updates の一般性や他 modality への適用可能性は要旨からは不明 - 実ロボット2タスクの詳細な設定や被験者数などは要旨からは不明

6. 次に読むべき論文は?

- World Action Models (WAMs) の原論文 - few-step distillation の基盤手法 (continued base distillation の元研究) - RoboTwin 2.0 のデータセット/ベンチマーク論文 - bimanual manipulation 向け diffusion policy / video generation 系の関連研究

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jialong Liu, Junjie He, Yandu Chen, Bin Zhou, Heng Su, Peijun Tang, Jianan Wang, Changhao Chen

分類: cs.CV, cs.RO

原文アブストラクト

World Action Models (WAMs) jointly generate future video and robot actions through iterative denoising. Few-step distillation reduces the number of model evaluations, but its coarse updates can move the student away from the teacher's trajectory. We propose Anchored Path Matching (APM), which supervises endpoint and short-transition predictions from states reached by the student. From each state, we continue the teacher to zero noise and use its endpoint and first intermediate state as targets. Modality-routed adapters learn to match both targets from the same starting state. When the two gradients conflict, anchor-priority updates preserve the endpoint gradient and remove the opposing component of the local gradient within each modality. One checkpoint supports 1-, 2-, and 4-step joint generation. The sampling budget can be chosen at deployment without retraining or teacher queries. On RoboTwin 2.0, we train only on Clean demonstrations and evaluate directly on the domain-randomized Random setting. At one step, APM improves closed-loop success over continued base distillation at matched inference budgets by 2.0 percentage points on Clean and 1.4 on Random. Video peak signal-to-noise ratio (PSNR) rises from 30.169 to 32.317 dB, with gains in structural similarity (SSIM) and learned perceptual image patch similarity (LPIPS). On two real-robot tasks, APM improves success over the one-step teacher and reduces control-cycle latency by $21.3\times$ relative to the eight-step teacher.Project page: https://jialonglong.github.io/Anchored-Path-Matching/.

関連論文

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2GXOとApptronik、Apolloの物流現場試験を拡大 最大1,000台の展開を構想量産・展開
  3. 3パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  4. 4SoftBank主導、Agile Robotsが5億ドル調達 NVIDIAと日立も参加資金調達
  5. 5NTT、ロボットの行動前に荷崩れを予測研究・技術

PR・アフィリエイト広告

OZ GAMING(GPU搭載BTOゲーミングPC)

OZ GAMING(GPU搭載BTOゲーミングPC)の公式広告バナーOZ GAMINGで完成品PCを見る ↗
PR本紙発行元 EmplifAI