日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
安全フィルタarXiv:2610.40922

信頼度で安全フィルタを調整するエンドツーエンド方策

Confidence-Modulated Safety Filtering for End-to-End Policies

シェア:XThreadsFacebookLINEはてブBluesky

エンドツーエンド方策の信頼度に応じて安全フィルタの保守性を実行時に調整し、安全領域内では性能を、外では余裕を確保する手法を提案した。

詳しい要約

1. どんなもの?

- 対象は end-to-end policy(task-specific controller から robot foundation model まで)の安全性を担保する safety filter。 - 課題は、filter の ODD(operational design domain)内では性能、外では余裕(margin)を巡る保守性のトレードオフ。 - 提案は policy の confidence に応じて filter の保守性を runtime で調整する filter-agnostic な pipeline。 - ODD 内では confidence で性能を買い、ODD 外では低 confidence で margin を追加する設計。

2. 先行研究と比べてどこがすごい?

- 従来の safety filter は policy の competence に関係なく保守性を固定し、ODD 内性能と ODD 外 margin をトレードオフしていた。 - 提案は policy の confidence を保守性の設定に用いる点が新しい。 - filter に依存しない(filter-agnostic)pipeline として runtime 調整を実現。 - 予備的な F1TENTH シミュレーションで、permissive と conservative な filter の長所を併せ持つ結果を示した。

3. 技術・手法の肝は?

- policy の confidence を runtime で推定し、safety filter の保守性レベルを変調する filter-agnostic pipeline。 - ODD 内では全設定が安全なので confidence を性能向上に使う。 - ODD 外では低 confidence 時に margin を増やし、filter のモデルが失敗する箇所の flag として機能させる。 - 具体的な confidence 推定器や変調則の詳細は要旨からは不明。

4. どうやって有効だと検証した?

- F1TENTH のシミュレーションで予備的に検証。 - 提案仮説(ODD 内で confidence が性能を買い、ODD 外で低 confidence が margin を追加)が成立する条件を確認。 - 変調付き filter が permissive と conservative な filter の強みを組み合わせることを示した。 - 実機や他ベンチマークでの検証は要旨からは不明。

5. 議論はある?

- confidence が filter のモデル失敗箇所を正しく flag できるかに依存し、その限界は要旨からは不明。 - ODD 内外の判定や confidence の校正(calibration)の扱いは要旨からは不明。 - 結果は F1TENTH の予備的シミュレーションに限られ、一般化可能性は要旨からは不明。 - 他の filter や robot foundation model への適用性は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で直接参照/比較されている個別研究は明示されていない。 - 関連手法として safety filter、control barrier function(CBF)、model predictive shielding、robot foundation model の confidence calibration 関連の文献を次に読む候補として挙げる。 - 評価環境として F1TENTH 関連の safety filtering 研究も候補。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Javier Borquez, Jaime F. Fisac

分類: cs.RO, eess.SY

原文アブストラクト

End-to-end policies, from task-specific controllers to robot foundation models, learn complex behavior from raw observations but are not guaranteed to remain safe, so they are often wrapped in a safety filter. The resulting system operates under two domains: the filter's operational design domain (ODD), where its assumptions hold and safety is certified, and the policy's competence domain, where it is reliable. Filters typically fix their conservativeness regardless of the policy's competence, trading performance inside the ODD against margin beyond it. We ask whether the policy's confidence should set that level, and propose a filter-agnostic pipeline that modulates it at runtime: inside the ODD, where every setting is safe, confidence buys performance; beyond it, low confidence adds margin, which helps when it flags where the filter's model fails. Preliminary F1TENTH simulations, where this holds, show the modulated filter combining the strengths of permissive and conservative filters.

関連論文

PR本紙発行元 EmplifAI