日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
視覚ナビゲーションarXiv:2609.36520

動的視覚ナビゲーションのための特権制御バリア関数をRGBのみの安全フィルタへ蒸留

Distilling Privileged Control Barrier Functions into RGB-Only Safety Filters for Dynamic Visual Navigation

シェア:XThreadsFacebookLINEはてブBluesky

特権的な制御バリア関数教師の安全行動をRGBのみの生徒フィルタに蒸留し、動的環境での衝突回避を実現する手法を提案。

詳しい要約

1. どんなもの?

RGBのみのend-to-end visual navigation policyの衝突脆弱性に対し、安全層を追加する研究。 - privilegedなCBF teacherの安全行動をRGBのみのstudent filterへ蒸留するteacher-student visual distillation frameworkを提案。 - studentは短いRGB履歴・robot velocity・nominal control actionから直接safe actionを出力。 - teacherはreal-to-sim dynamic Gaussian Splatting環境でground-truthのrobot/obstacle状態を利用。 - 展開時はRGB観測とrobot velocityのみで、explicit 3D reconstructionやonline renderingを不要とする。

2. 先行研究と比べてどこがすごい?

既存のvisual CBFはRGBから安全を目指すが、real-time renderingやexplicit scene reconstructionに依存し、主にstatic scene向けでonboard展開が困難。 - 本研究はdynamic environment向けに、privileged CBF teacherをRGB-only studentへ蒸留。 - 展開時に3D reconstructionやonline renderingを必要としない点が実用性で優位。 - 実験でvisual CBF baselinesを上回り、dynamic obstacle motion下でRGB-based navigation policyの安全性を改善。

3. 技術・手法の肝は?

teacher-student visual distillation frameworkが肝。 - teacherはreal-to-sim dynamic Gaussian Splatting環境でground-truthのrobot/obstacle状態からCBFを構築。 - teacher-student情報ギャップ低減のため、teacherはstudentのRGB履歴内で観測可能なobstacleのみからsafety constraintsを構築。 - obstacle-velocity uncertaintyを考慮し、motion variationsへのrobustnessを向上。 - action augmentationでstudentを多様なsafe/unsafe nominal actionに晒し、safety boundaryの捕捉を促す。 - studentは短いRGB history・robot velocity・nominal control actionを直接safe actionへ写像。

4. どうやって有効だと検証した?

実験により、提案手法がvisual CBF baselinesを上回ることを示す。 - dynamic obstacle motion下でRGB-based navigation policiesの安全性が改善。 - 具体的なデータセット名・評価指標・実験設定の詳細は要旨からは不明。 - Project page: https://syeon-yoo.github.io/distill-cbf-site/ が示されている。

5. 議論はある?

要旨からは不明。 - 限界・失敗事例・計算コスト・real-world展開時の課題などについての議論は要旨に記載がない。 - teacher-student情報ギャップやobstacle-velocity uncertaintyへの対処は述べられているが、その限界は不明。

6. 次に読むべき論文は?

要旨で参照/比較されているvisual CBF baselines、および関連手法としてControl Barrier Function (CBF)、Gaussian Splatting、teacher-student distillation、visual navigation policyが挙げられる。 - 具体的な論文名は要旨からは不明。 - 同分野の定番としてsafe reinforcement learningやmodel predictive safety filter、privileged learningに関する研究を次に読むべき。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Seungyeon Yoo, Gawon Lee, Seungwoo Jung, Inkyu Jang, H. Jin Kim

分類: cs.RO, cs.CV, eess.SY

原文アブストラクト

RGB-only end-to-end visual navigation policies remain vulnerable to collisions in real-world dynamic environments, motivating a dedicated safety layer. Existing visual Control Barrier Function (CBF) approaches seek to provide safety from RGB observations, but often rely on real-time rendering or explicit scene reconstruction and are primarily designed for static scenes, limiting their practicality for onboard deployment. We propose a teacher-student visual distillation framework that transfers the safety behavior of a privileged CBF teacher to an RGB-only student filter for dynamic environments. The student maps a short RGB history, robot velocity, and a nominal control action directly to a safe action, while the teacher uses ground-truth robot and obstacle states in a real-to-sim dynamic Gaussian Splatting environment. To reduce the teacher-student information gap, the teacher constructs safety constraints only from obstacles observable within the student's RGB history. It also accounts for obstacle-velocity uncertainty to improve robustness to motion variations, while action augmentation exposes the student to diverse safe and unsafe nominal actions to better capture the safety boundary. At deployment, the student requires only RGB observations and robot velocity, without explicit 3D reconstruction or online rendering. Experiments show that the proposed method outperforms visual CBF baselines and improves the safety of RGB-based navigation policies under dynamic obstacle motion. Project page: https://syeon-yoo.github.io/distill-cbf-site/.

関連論文

PR本紙発行元 EmplifAI