日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
マニピュレーションarXiv:2608.17717v1

CompCPZ: 言語誘導ロボット操作におけるマルチモーダル意図の保存

CompCPZ: Preserving Multi-Modal Intent in Language-Guided Robot Manipulation

シェア:XThreadsFacebookLINEはてブBluesky

ロボット操作において、指示の曖昧さ(例:「赤い皿か青い皿の近くにカップを置いて」)を単一の目標点に潰さず、多様な解空間を多面体で表現する手法を提案。

詳しい要約

1. どんなもの?

CompCPZは、言語条件付きロボット操作ポリシーが、選言的指示(例:「赤い皿か青い皿の近くにカップを置いて」)を単一の連結集合に潰してしまい、どちらの意図も満たさない中間点に到達するという構造的限界に対処する、音響的な代数レイヤーである。CompCPZは、言語解析木に沿ってプリミティブごとの制約付き多項式ゾノトープ包囲を再帰的に合成し、分布に依存しないコンフォーマル被覆とサブミリ秒の実行時を実現する。

2. 先行研究と比べてどこがすごい?

従来の言語条件付きポリシーは、選言的指示を単一の連結集合に表現するため、複数の実行可能なモードを保持できない。また、実行時のモード不確実性の下で単一の行動にコミットするプランナーは性能が低下する。CompCPZは、多峰性の選言表現を回復するための音響的な代数レイヤーを提供し、凸集合ベースライン、多峰デコーダ、ゼロショットVLAモデルを上回る性能を示す。

3. 技術・手法の肝は?

手法の肝は、言語解析木に沿ってプリミティブごとの制約付き多項式ゾノトープ包囲を再帰的に合成することである。これにより、選言的指示の各モードを保持する多峰性の表現を構築する。さらに、分布に依存しないコンフォーマル被覆を用いて、カバレッジを保証し、サブミリ秒の実行時を実現する。

4. どうやって有効だと検証した?

閉ループのManiSkill3テーブルトップ操作ベンチマークで検証した。凸集合ベースライン、多峰デコーダ、ゼロショットVLAモデルと比較し、1,900/1,918ペアの勝利(p << 10^(-30))を達成した。また、モーションキャプチャ下のUnitree Go2四足ロボットによる平面実機試験にも、再調整なしで転移した。

5. 議論はある?

要旨からは、議論の詳細は不明である。ただし、結果は、言語接地の評価は、デコードされた目標に到達するかだけでなく、表現された実行可能性集合がユーザーの意図の連結成分構造を保持するかどうかで行うべきであることを示唆している。

6. 次に読むべき論文は?

要旨で参照されている関連研究として、凸集合ベースライン、多峰デコーダ、ゼロショットVLAモデルが挙げられる。具体的な論文名は要旨にないため、同分野の定番として、言語条件付きロボット操作に関する研究(例:Language-Table、RT-1、RT-2)や、多峰性表現のためのセットベース手法(例:zonotope、polytope)を読むとよい。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Zhen Zhang, Ahmad Hafez, Peng Xie, Yanliang Huang, Wenyuan Wu, Amr Alanwar

分類: cs.RO

原文アブストラクト

A robot asked to "place the cup near the red plate or the blue plate" may reach the centroid between them and appear geometrically successful, while satisfying neither disjunct of the instruction. This silent semantic failure exposes a structural limitation of language-conditioned robot policies: representations that collapse a disjunctive instruction into a single connected set cannot preserve all feasible modes, and planners that commit to one action degrade under run-time mode uncertainty. We address this limitation with CompCPZ, a sound algebraic layer that language-conditioned learning systems wrap to recover multi-modal disjunctive representation, recursively composing per-primitive constrained polynomial zonotope enclosures along the language parse tree with distribution-free conformal coverage and sub-millisecond runtime. On a closed-loop ManiSkill3 tabletop-manipulation benchmark, CompCPZ outperforms convex set baselines, multi-peak decoders, and a zero-shot vision-language-action model (1,900/1,918 paired wins, p << 10^(-30)); the same compiler also transfers without retuning to planar real-robot trials on a Unitree Go2 quadruped under motion capture. These results suggest that compositional language grounding should be evaluated not only by reaching a decoded target, but by whether the represented feasibility set preserves the connected-component structure of the user's intent.