日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
エージェント記憶arXiv:2609.30558

エージェント記憶の安定性-可塑性トレードオフを認知実験パラダイムで診断するMemProbe

Probing Stability-Plasticity Tradeoffs in Agent Memory through Cognitive Experimental Paradigms

シェア:XThreadsFacebookLINEはてブBluesky

認知科学の実験パラダイムを応用し、エージェントの記憶システムが情報をいつ更新・保持・不確実扱いするかを診断する枠組みMemProbeを提案し、6つの記憶システムを評価した。

詳しい要約

1. どんなもの?

- エージェント記憶システムの stability-plasticity tradeoff を診断する MemProbe を提案。 - 認知科学の知見に基づく4つの実験パラダイム(interference, misinformation, consolidation strength, reconsolidation window)を導入。 - 記憶の更新・保持・不確実性の扱いを操作し、正しさを行動プロファイルに分解。 - 56-episode の診断スイートで6つの incremental memory systems を統一プロトコルで評価。

2. 先行研究と比べてどこがすごい?

- 従来評価は最終回答精度に記憶挙動を集約しがち。 - MemProbe は集約スコアが同程度でも異なる行動プロファイルを明示。 - 記憶の更新・保持・帰属・時間的組織化を解釈可能な形で診断。 - 認知記憶研究の再構成性・干渉・情報源信頼性・強化・再活性化の知見を実験パラダイム化。

3. 技術・手法の肝は?

- 認知科学の記憶研究の核心洞察を4つの再利用可能な実験パラダイムに変換。 - interference, misinformation, consolidation strength, reconsolidation window を操作。 - 正しさを行動プロファイルに分解し、更新・保持・帰属・時間的組織化を評価。 - 56-episode の診断スイートと統一プロトコルで6つの incremental memory systems を評価。

4. どうやって有効だと検証した?

- 56-episode の診断スイートを構築し、6つの incremental memory systems を統一プロトコルで評価。 - 集約スコアが類似するシステムでも異なる行動プロファイルを示すことを確認。 - 集約性能を記憶維持の解釈可能なプロファイルに変換できることを実証。

5. 議論はある?

- 集約スコアだけでは記憶挙動の違いを捉えられない点を指摘。 - MemProbe は診断レンズとして記憶維持の解釈可能性を提供。 - 具体的な限界や議論の詳細は要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照/比較されている研究は明示されていない。 - 関連手法として incremental memory systems、cognitive memory research が挙げられる。 - 同分野の定番として agent memory systems の評価手法が考えられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Jiaqi Ding, Guorong Wu

分類: cs.CL, cs.AI, cs.LG

原文アブストラクト

Agent memory systems are increasingly used to maintain long-term user preferences, task states and evolving facts, but current evaluations often collapse memory behavior into final-answer accuracy. We introduce MemProbe, a cognitive-science-inspired framework for diagnosing stability-plasticity tradeoffs in agent memory. The framework is motivated by a core insight from cognitive memory research: memory is reconstructive and shaped by interference, source reliability, reinforcement, and reactivation. MemProbe turns this insight into four reusable experimental paradigms (interference, misinformation, consolidation strength, and reconsolidation window) that manipulate when a memory should be updated, preserved, or treated as uncertain. It further decomposes correctness into behavioral profiles that reveal how systems update, preserve, attribute, and temporally organize information. We instantiate these paradigms in a 56-episode diagnostic suite and evaluate six incremental memory systems under a unified protocol. Results show that systems with similar aggregate scores exhibit distinct behavioral profiles. MemProbe provides such a diagnostic lens, turning aggregate performance into interpretable profiles of memory maintenance over time. Code is available at https://github.com/jq-ding/MemProbe.

PR本紙発行元 EmplifAI