日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
失敗検出arXiv:2610.13403

Robot-WATCHDOG:物体中心グラフ表現による失敗検出

Robot-WATCHDOG : failure detection through object-centric graph representation

シェア:XThreadsFacebookLINEはてブBluesky

操作シーンを物体中心の時空間グラフで表現し、正常デモのみから自己教師ありで失敗を検出する枠組みを提案。幾何偏差と関係整合性に基づくTPCと、将来の物体状態を予測するGnnTの2つのスコアを検証した。

詳しい要約

1. どんなもの?

- ロボットの失敗検出フレームワーク「Robot-WATCHDOG」を提案。 - 自己教師あり学習で、操作シーンをobject-centric spatio-temporal graphとしてモデル化。 - 失敗スコアとしてTrajectory Projection and Correlation (TPC)とGnnTの2つを検討。 - 公開ベンチマークと新データセットで評価。

2. 先行研究と比べてどこがすごい?

- 既存手法は良性の変動への頑健性と意味的・相互作用レベルのエラー捕捉のバランスが課題。 - 提案手法は画像ベースの失敗検出器よりも、特に意味的・相互作用レベルの失敗で優れる。 - TPCはAUPRとMCCの両方で最高性能、シード間の分散も小さい。

3. 技術・手法の肝は?

- 操作シーンをobject-centric spatio-temporal graphで表現。 - TPC: 幾何的偏差と関係的一貫性を測るノンパラメトリック指標。 - GnnT: Graph Attention NetworkとTransformerを組み合わせ、将来の物体状態を予測。 - 正常デモのみから自己教師ありで失敗検出を学習。

4. どうやって有効だと検証した?

- 公開ベンチマークと新たに作成した意味的に複雑な操作タスクのデータセットで評価。 - 6タスク、10ランダムシードで実験。 - 画像ベースの失敗検出器と比較し、TPCがAUPRとMCCで最高性能。 - 定性的結果をWebで公開。

5. 議論はある?

- 良性の変動への頑健性と意味的エラー捕捉のバランスが重要。 - TPCは低分散で安定した性能を示すが、GnnTとの比較や限界については要旨からは不明。 - オープンワールド設定での失敗定義の難しさが背景。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究: 画像ベースの失敗検出器、Graph Attention Network、Transformer。 - 関連手法: Trajectory Projection and Correlation (TPC)、GnnT。 - 同分野の定番: 自己教師あり失敗検出、object-centric表現学習。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Quentin Rolland, Fabrice Mayran de Chamisso, Jean-Baptiste Mouret

分類: cs.RO

原文アブストラクト

Reliable real-time failure detection is critical for deploying learned robotic policies, yet defining failures explicitly is infeasible in open-world settings. This motivates failure detection from nominal demonstrations alone. Existing methods, however, struggle to balance robustness to benign variations with the ability to capture semantic and interaction-level errors. We introduce Robot-WATCHDOG, a self-supervised framework that models manipulation scenes as object-centric spatio-temporal graphs. Building on this representation, we investigate two complementary failure scores: Trajectory Projection and Correlation (TPC), a non-parametric measure of geometric deviation and relational consistency, and GnnT, a Graph Attention Network with a Transformer that predicts future object states. We evaluate both on a public benchmark and on a new dataset of semantically complex manipulation tasks, across six tasks and ten random seeds. Both scores outperform image-based failure detectors, particularly on semantic and interaction-level failures. TPC provides the strongest performance in AUPR and MCC on both dataset averages, with low variance across seeds. Qualitative results are made available at https://cea-list.github.io/Robot-WATCHDOG/.

関連論文

PR本紙発行元 EmplifAI