日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
sim2realarXiv:2609.25653

PhyVisGen: 物理的・視覚的に高忠実なロボットマニピュレーションデータ生成

PhyVisGen: Physically and Visually High-Fidelity Robotic Manipulation Data Generation

シェア:XThreadsFacebookLINEはてブBluesky

ソフトグリッパを含む操作軌跡の物理シミュレーションと実シーン再構成によるリアルな描画を組み合わせ、実機データなしで学習した方策が実ロボット5タスクで65〜95%の成功率を達成したデータ生成フレームワーク。

詳しい要約

1. どんなもの?

大規模な manipulation demonstrations を必要とする visuomotor policies 学習のため、物理的・視覚的に高忠実なロボット manipulation データを生成するフレームワーク PhyVisGen を提案。soft grippers を含む manipulation の synthetic data の転移性を高めることを狙う。

2. 先行研究と比べてどこがすごい?

従来の simulation は物理的・視覚的乖離により synthetic data の転移性が制限され、特に soft grippers で課題があった。PhyVisGen は物理・視覚両面の高忠実化により、real-robot demonstration data や policy fine-tuning なしで実機タスクに転移可能な点が優位。

3. 技術・手法の肝は?

- 物理側: Incremental Potential Contact (IPC) に基づく arm-gripper coupling method を導入し、manipulation 軌跡全体で高忠実な soft contact を実現。 - 視覚側: real-scene reconstruction と real-time path tracing を組み合わせ、撮影シーンの外観を保ちつつ視覚的にリアルな観測を生成。

4. どうやって有効だと検証した?

定量的評価により PhyVisGen の物理的・視覚的忠実性を実証。synthetic manipulation demonstrations のみで学習した policies が、real-robot demonstration data や policy fine-tuning なしに、5つの実機タスクで 65-95% の成功率を達成。

5. 議論はある?

要旨からは不明。

6. 次に読むべき論文は?

要旨で参照/比較されている研究は明示されていない。関連手法として Incremental Potential Contact (IPC)、real-scene reconstruction、real-time path tracing が挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Yu Zheng, Qiyu Feng, Yixin Wu, Baoquan Yang, Yixuan Zhou, Bingyang Hu, Kemeng Huang, Guansheng Yang, Hesheng Wang

分類: cs.RO

原文アブストラクト

Large-scale manipulation demonstrations are essential for learning robust visuomotor policies, yet real-world data collection is expensive and difficult to scale. Simulation offers a promising alternative, but physical and visual discrepancies can limit the transferability of synthetic data, particularly for manipulation with soft grippers. We present PhyVisGen, a physically and visually high-fidelity framework for scalable robotic manipulation data generation. On the physical side, PhyVisGen introduces an arm-gripper coupling method based on the Incremental Potential Contact (IPC), enabling high-fidelity soft contact throughout complete manipulation trajectories. On the visual side, it combines real-scene reconstruction with real-time path tracing to generate visually realistic observations while preserving captured scene appearance. Quantitative evaluations demonstrate the physical and visual fidelity of PhyVisGen. Policies trained exclusively on synthetic manipulation demonstrations achieve 65-95% success across five real-robot tasks, without real-robot demonstration data or policy fine-tuning.

関連論文

PR本紙発行元 EmplifAI