日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
模倣学習/遅延補償arXiv:2608.15924

RAPAC-DP: 遅延実行下での拡散ポリシーに対する応答整合型保留アクション補償

RAPAC-DP: Response-Aligned Pending-Action Compensation for Diffusion Policies under Delayed Execution

シェア:XThreadsFacebookLINEはてブBluesky

クラウド推論の遅延による制御性能低下を補うため、実行予定のアクション列を条件入力として活用する補償機構を拡散・フローベースのポリシーに組み込んだ。遅延が無視できる場合は元のポリシーと完全に一致し、遅延デモなしで訓練可能。

詳しい要約

1. どんなもの?

RAPAC-DPは、クラウド推論による遅延を補償するためのフレームワークであり、拡散ベースおよびフローベースの行動生成器を対象としている。クラウド応答が到着する前に実行予定のアクションをpending-action sequenceとしてエンコードし、それをパラメータ効率的な補償経路の条件付け入力として使用する。遅延の影響が無視できる場合、この経路をバイパスすることで凍結されたベースポリシーを正確に再現する。

2. 先行研究と比べてどこがすごい?

先行研究では、遅延補償のためにシステムダイナミクスや遅延デモンストレーションを必要とすることが多いが、RAPAC-DPは遅延のないデモンストレーションから遅延条件付きサンプルを構築するため、明示的なシステムダイナミクスや追加の遅延デモンストレーションを必要としない点が新しい。また、拡散・フローベースの行動生成器に適用可能な汎用性を持つ。

3. 技術・手法の肝は?

手法の肝は、遅延中に実行予定のアクションをpending-action sequenceとしてエンコードし、それを補償経路の条件付け入力とすること。補償経路はパラメータ効率的であり、遅延効果が無視できる場合はバイパス可能で、ベースポリシーを正確に再現する。訓練時には、遅延のないデモンストレーションから遅延条件付きサンプルを生成する。

4. どうやって有効だと検証した?

KinetixとRoboMimicのタスクで検証した。Kinetixの最大固定遅延では、遅延なし性能の81.4%を維持した。RoboMimicの3タスクでは、最大固定遅延で平均成功率0.633を達成した。

5. 議論はある?

要旨からは、遅延補償の有効性が示されたが、遅延が変動する場合やより複雑な環境での性能、実システムへの適用可能性などについては不明。また、パラメータ効率的な補償経路の設計詳細や、ベースポリシーとの相互作用についての議論は要旨に含まれていない。

6. 次に読むべき論文は?

要旨で参照されている研究は明示されていないが、関連する分野として、拡散ポリシー(Diffusion Policy)やフローベースの行動生成、クラウドロボティクスにおける遅延補償の研究が挙げられる。具体的には、拡散ポリシーの元論文や、遅延補償のためのモデル予測制御(MPC)を用いた研究などが関連する。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Tao Wang, Wei Wang, Jianhui Wang, Qi Wang, Weidi Huang, Bing Xu

分類: cs.RO

原文アブストラクト

Cloud-side inference gives imitation-learning policies access to greater computational resources, but communication and computation delays can degrade control performance. To compensate for these delays, we propose RAPAC-DP, a response-aligned pending-action compensation framework designed for both diffusion- and flow-based action generators. RAPAC-DP encodes the actions already scheduled for execution before the cloud response arrives into a pending-action sequence that serves as the conditioning input to a parameter-efficient compensation pathway. When delay effects are negligible, bypassing this pathway exactly recovers the frozen base policy. For training, RAPAC-DP constructs delay-conditioned samples from delay-free demonstrations, requiring neither explicit system dynamics nor additional delayed demonstrations. At the largest fixed delay tested on Kinetix, RAPAC-DP retained 81.4% of its overall delay-free performance. At the largest fixed delay tested on each RoboMimic task, it achieved a mean success rate of 0.633 across the three tasks. These results demonstrate the effectiveness of pending-action compensation for cloud-deployed imitation-learning policies.