日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

動画検出/ベンチマークarXiv:2611.14941

現実認識ギャップ:AI改変動画検出器は実世界に耐えられるか

Reality Perception Gap: Are AI-Manipulated Video Detectors Ready for the Real World?

シェア:XThreadsFacebookLINEはてブBluesky

SNS再圧縮や実機カメラ由来の劣化を含む1万本の動画ベンチマークRPGを構築し、18種の検出器が実運用条件で偽動画をほとんど検出できないことを示した。

詳しい要約

1. どんなもの?

- AI-manipulated video 検出器の実環境性能を測る新 benchmark「Reality Perception Gap (RPG)」の提案 - 10,000 本の動画を収録 - frontier generators による生成動画と部分的 synthetic edits を含む - cross-platform repost compression を適用 - camera-side optical artifacts を持つ実映像も対にする - crime や wartime footage など社会的に脆弱な content も含む - 展開環境での検出性能を評価することを目的とする

2. 先行研究と比べてどこがすごい?

- 従来の検出器評価は clean で curated な dataset 上で行われていた - RPG は repost compression や不完全な hardware 由来の artifact を再現する点が新しい - 社会的に脆弱な content を含む点も従来 benchmark と異なる - 18 検出器を評価し、1% false-positive rate で 15% 超の fake を検出できたものは無いことを示した

3. 技術・手法の肝は?

- frontier generators と部分的 synthetic edits からなる 10,000 動画の benchmark 構築 - cross-platform repost compression を適用して実環境を模擬 - camera-side optical artifacts を持つ実 footage を対照として収録 - positive control と re-encoding sweep により失敗要因を分離 - generator/content shift による劣化 - repost compression による low-level traces の消失

4. どうやって有効だと検証した?

- 18 検出器を RPG 上で評価 - 1% false-positive rate 条件下で最大でも 15% 未満の fake 検出率 - positive control と re-encoding sweep で失敗源を切り分け - compression 前の generator/content shift が検出器を劣化させる - repost compression が artifact-based detectors の依拠する low-level traces を消す

5. 議論はある?

- 展開条件で生成 artifact が失われると既存検出器は苦戦する - 相補的な失敗から、展開条件下での training と low-level・temporal・semantic evidence の組み合わせが必要と示唆 - passive detection は限界に達した可能性を指摘 - 具体的な改善手法や定量限界は要旨からは不明

6. 次に読むべき論文は?

- artifact-based detectors(low-level traces に依拠する既存手法) - generator/content shift に関する研究 - repost compression を考慮した training 手法 - temporal・semantic evidence を統合する検出アプローチ - passive detection の限界に関する議論(具体的な論文名は要旨からは不明)

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Xiangrui Liu, Xinmiao Luan, Xinyuan Wang, Zhiyuan Fang, Chi-Yao Huang, Douglas C. Montgomery, Yanjie Fu, Felix Juefei-Xu, YeZhou Yang

分類: cs.CV

原文アブストラクト

AI-manipulated video detectors are typically evaluated on clean, curated datasets. In deployment, however, videos have usually passed through repost compression on social-media platforms and sometimes were captured by imperfect hardware. To measure detection under these conditions, we introduce Reality Perception Gap (RPG), a benchmark of 10,000 videos from frontier generators and partially synthetic edits, processed with cross-platform repost compression and paired with real footage that carries camera-side optical artifacts. RPG also includes socially fragile content, such as crime and wartime footage, where fabricated videos can cause severe social harm. Across 18 detectors, none catches more than 15% of fakes at a 1% false-positive rate. A positive control and a re-encoding sweep separate two sources of failure: generator and content shift degrades detectors before any compression, and repost compression erases the low-level traces that the artifact-based detectors relies on. Existing detectors therefore struggle when deployment conditions strip away the generation artifacts they rely on. These complementary failures suggest that robust detection requires training under deployment conditions and combining low-level, temporal, and semantic evidence, where passive detection may have reached its limits.

  1. 1Boston Dynamics、車輪付きAtlasの研究試作機を紹介研究・技術
  2. 2Hugging Face、ロボット学習基盤「LeRobot v0.7.0」を公開 対話操作と大規模データ学習に対応新製品・発表
  3. 3AGIBOTのG2 6台、上海のコンビニで24時間試験 1,730タスクを実施量産・展開
  4. 4Agility Robotics、ナスダックで取引開始 米国初の人型ロボット専業上場企業と報道業界動向
  5. 5UC BerkeleyとNVIDIAの研究者、AIエージェントでロボット制御コードを仮想環境で改善研究・技術
PR本紙発行元 EmplifAI