日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
継続学習arXiv:2609.25146

ショウジョウバエに学ぶ階層的モジュール性による汎用的な継続学習

Brain-Inspired Hierarchical Modularity for General Continual Learning

シェア:XThreadsFacebookLINEはてブBluesky

ショウジョウバエの学習・記憶系に着想を得た階層的モジュール構造を事前学習済み基盤モデルに組み込み、オンラインで不確実なデータストリーム下での継続学習を実現した研究。

詳しい要約

1. どんなもの?

- 継続学習(Continual Learning)の新しい枠組みを提案。 - 従来のオフライン・タスク境界明確な設定ではなく、オンラインで不確実・進化するデータストリーム下での一般的継続学習を対象。 - ショウジョウバエの学習・記憶システムに着想を得た階層的モジュール性を導入。 - 事前学習済み基盤モデルに軽量なモジュール適応を施し、専門家の特化とアンサンブル統合を両立。 - 視覚認識、視覚言語理解、エゴ・エクソ動画理解、身体性視覚言語行動学習で有効性を検証。

2. 先行研究と比べてどこがすごい?

- 従来の継続学習はオフラインでタスク境界が明確な設定が主流で、オンライン・不確実・進化するデータストリームには対応しにくい。 - リプレイなしの代替手法と比較して、身体性マニピュレーションで50パーセントポイント以上の性能向上を達成。 - 脳に着想を得た階層的モジュール性により、干渉の低減と一般化の促進を同時に実現する点が新しい。 - 複数のモダリティやタスクにまたがる一般的な継続学習設定で一貫した改善を示す。

3. 技術・手法の肝は?

- ショウジョウバエの学習・記憶システムの組織化に基づく階層的モジュール原理を同定。 - 専門家の特化とアンサンブル統合を調整する仕組みを採用。 - 事前学習済み基盤モデルに対する軽量なモジュール適応を実現。 - 脳に着想を得たランダム拡張による専門家ルーティングと、空間・時間スケールにわたる多様なモジュール統合を組み合わせる。

4. どうやって有効だと検証した?

- 視覚認識、視覚言語理解、エゴ・エクソ動画理解、身体性視覚言語行動学習の4領域で評価。 - オンラインで不確実なデータストリーム下での学習性能を測定。 - リプレイなしの代替手法と比較し、身体性マニピュレーションで50パーセントポイント以上の改善を確認。 - 複数のタスクで一貫した性能向上を報告。

5. 議論はある?

- 階層的モジュール性が生物学的に根拠のある動的経験からの学習経路であることを支持する知見を提示。 - 一般的継続学習におけるオンライン・不確実・進化するデータストリームへの対応可能性を示唆。 - 具体的な限界や課題については要旨からは不明。

6. 次に読むべき論文は?

- 要旨で参照・比較されている研究は明示されていない。 - 関連手法として、リプレイベースの継続学習、モジュール型継続学習、事前学習済み基盤モデルの適応(例:Adapter、LoRA)、脳に着想を得た継続学習(例:Complementary Learning Systems)などが挙げられる。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Hongwei Yan, Kanglei Zhou, Qi Cheng, Weiyi Dong, Chunyan Lan, Guanglong Sun, Jun Zhou, Qian Li, Yi Zhong, Liyuan Wang

分類: cs.LG, cs.AI

原文アブストラクト

Continual learning, the ability to learn from sequential experience while retaining and adapting prior knowledge, is central to intelligent systems operating in changing environments. However, conventional continual learning is typically studied with offline task-wise training and clear task boundaries, leaving a substantial gap from general continual learning under online, uncertain, and evolving data streams. In this regime, intelligent systems must separate conflicting experience to reduce interference while integrating compatible experience to promote generalization. Inspired by the organization of the Drosophila learning and memory system, we identify a hierarchical modular principle that coordinates both functions through expert specialization and ensemble integration. We instantiate this principle as lightweight modular adaptation of pretrained foundation models, combining brain-inspired random expansion for expert routing and diversified modular integration across spatial and temporal scales. Across visual recognition, vision-language understanding, ego-exo video understanding, and embodied vision-language-action learning, our method consistently improves learning under online and uncertain data streams, with gains exceeding 50 percentage points over replay-free alternatives in embodied manipulation. These findings support hierarchical modularity as a biologically grounded path for learning from dynamic experience.

関連論文

PR本紙発行元 EmplifAI