日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
歩行arXiv:2609.25450

REDACT: 未知の視覚劣化下での堅牢な知覚歩行

REDACT: Robust Perceptive Locomotion under Unseen Visual Corruption

シェア:XThreadsFacebookLINEはてブBluesky

クリーンな深度画像のみで学習し、未知の視覚ノイズや遮蔽があっても有用な深度情報を保持する教示-生徒フレームワークを提案し、歩行性能の低下を抑えた。

詳しい要約

1. どんなもの?

- 視覚劣化に頑健な移動ポリシーを目指す研究。 - 深度条件付きlocomotion policiesは、訓練分布外の観測で予期せぬ行動をとる問題がある。 - occlusion, invalid returns, sensor noise, visual distractorsが展開時の観測をずらす。 - REDACT (Retaining Evidence Despite Artifacts for Continued Traversal)を提案。 - teacher-student frameworkで、改良visual encoder、persistent feature masking、consensus-gatingを組み合わせる。 - 未モデルのcorruption下でも有用な深度情報を保持する。

2. 先行研究と比べてどこがすごい?

- 既存のsynthetic sensor augmentationは指定された劣化を対象とし、訓練に含まれないcorruption familyの挙動を定義しない。 - REDACTは訓練時カバレッジのギャップに対処する。 - clean simulated depthのみで訓練し、unseen corruption下で有用な視覚情報を保持。 - 既存のparkour baselinesより高いtraversal successを示す。 - depth augmentationのcorruption family評価で、augmentation coverageが欠ける領域でもrobustnessを改善。

3. 技術・手法の肝は?

- teacher-student frameworkを採用。 - 改良されたvisual encoder architecture。 - persistent feature masking。 - 新規consensus-gating algorithm。 - gateはclean observationsのみでapproximate conformal calibrationを行い、corruption typeの事前知識を不要とする。 - これによりunmodeled corruption下で有用な深度情報を保持する。

4. どうやって有効だと検証した?

- clean simulated depthで訓練。 - unseen corruption下でtraversal successを既存parkour baselinesと比較。 - corruption familiesにわたるdepth augmentation評価を実施。 - real-world trialsでstructuredおよびforested environmentsへのzero-shot transferを実証。 - ただし具体的な成功率や数値は要旨からは不明。

5. 議論はある?

- synthetic sensor augmentationだけでは訓練に含まれないcorruption familyへの挙動を定義できない点を議論。 - REDACTはclean observationsのみのcalibrationでcorruption typeの事前知識を不要とする。 - augmentation coverageが欠ける領域でのrobustness改善を示す。 - 限界や失敗事例、計算コスト、他のcorruptionへの一般化については要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている既存のparkour baselines。 - depth-conditioned locomotion policies。 - synthetic sensor augmentation。 - teacher-student framework。 - conformal calibration。 - 同分野の定番としてvisual locomotionやsim-to-real transferの研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Natapat Kirdwichai, Tobias Driskell-Poole, Andrei Sontea, Jadu Dash, Muhammad Burhan Hafez, Danesh Tarapore

分類: cs.RO

原文アブストラクト

Depth-conditioned locomotion policies have demonstrated impressive agile maneuvers, but can be steered to unpredictable actions when observations are outside their training distribution. Occlusion, invalid returns, sensor noise, and visual distractors can shift deployment observations away from nominal simulated depth. While synthetic sensor augmentation targets specified degradations, it does not by itself define behavior under corruption families omitted from training. To address gaps in training-time coverage, we present REDACT (Retaining Evidence Despite Artifacts for Continued Traversal), a teacher-student framework combining an improved visual encoder architecture, persistent feature masking, and a novel consensus-gating algorithm to retain useful depth information under unmodeled corruption. The gate uses approximate conformal calibration on clean observations alone, requiring no prior knowledge of the corruption type. Trained on clean simulated depth, REDACT retains useful visual information under unseen corruption, supporting higher traversal success than existing parkour baselines. Evaluation of depth augmentation across corruption families further shows that REDACT improves robustness where augmentation coverage is missing. Real-world trials demonstrate zero-shot transfer to structured and forested environments with unfamiliar scene content.

関連論文

PR本紙発行元 EmplifAI