日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
VLAarXiv:2610.40430

実演拡張と実行設計による細粒度マニピュレーションの改善

Improving Fine-Grained Manipulation through Demonstration Expansion and Execution Design

シェア:XThreadsFacebookLINEはてブBluesky

事前学習済みVLAポリシーを、指示・視覚条件を多様化した実演拡張とタスク別の実行設計で微調整し、細粒度操作タスクの精度を向上させた研究。

詳しい要約

1. どんなもの?

- 細粒度マニピュレーション向けのフレームワーク DEED(Demonstration Expansion and Execution Design) - pretrained vision-language-action policy を MetaFine の5タスクへ適応させる - 構成要素は「structured demonstration expansion」と「execution design」 - 目的は instruction following、visual variations への robustness、predicted actions の precise robot control への変換 - 公式 Overall score は 85.55%

2. 先行研究と比べてどこがすごい?

- 要旨からは不明(比較対象の先行研究が明示されていない) - 特徴として、単一初期シーンから異なる instruction の demonstration を生成する点を挙げている - 同一の physical trajectory を元の states と action targets を保ったまま、異なる camera positions と lighting conditions で render する点を挙げている

3. 技術・手法の肝は?

- demonstration expansion - 同じ initial scene から異なる instructions 向けの demonstrations を生成 - 各 physical trajectory を異なる camera positions / lighting conditions で render(states と action targets は保持) - supervised adaptation 時の hierarchical sampling strategy - instructions、trajectories、visual conditions のバランスを取る - deployment 時の execution design - predicted action chunks を inverse kinematics で robot commands に変換 - タスクごとに選んだ gripper mappings を使用 - closed-loop replanning を実施

4. どうやって有効だと検証した?

- MetaFine の5タスクで評価 - 公式 Overall score 85.55% を達成 - fixed-policy evaluations により、performance が execution horizon、denoising budget、gripper mapping によって変動することを確認

5. 議論はある?

- fixed-policy evaluations で execution horizon、denoising budget、gripper mapping への依存が示されている - 具体的な議論の内容や限界については要旨からは不明

6. 次に読むべき論文は?

- 要旨で参照・比較されている研究は明示されていない - 関連手法として vision-language-action policy、inverse kinematics、closed-loop replanning が挙げられる - 同分野の定番として imitation learning、diffusion policy 系の研究が候補(要旨に記載なし)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jingxu Gu, Dongze Lian

分類: cs.RO

原文アブストラクト

Fine-grained manipulation requires a robot policy to follow instructions, remain robust to visual variations, and translate predicted actions into precise robot control. We present Demonstration Expansion and Execution Design (DEED), a framework for adapting a pretrained vision-language-action policy to the five MetaFine tasks through structured demonstration expansion and execution design. DEED generates demonstrations for different instructions from the same initial scene and renders each physical trajectory under different camera positions and lighting conditions while preserving its original states and action targets. A hierarchical sampling strategy balances instructions, trajectories, and visual conditions during supervised adaptation. At deployment, DEED converts predicted action chunks into robot commands using inverse kinematics, gripper mappings selected for each task, and closed-loop replanning. DEED achieves an official Overall score of 85.55%. Fixed-policy evaluations show that performance varies with execution horizon, denoising budget, and gripper mapping.

関連論文

PR本紙発行元 EmplifAI