日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

週刊ニュースレター購読
BMI/神経デコーディングarXiv:2608.04389v1

NeuroPB: 事前学習された行動表現による神経デコーディングのスケーリング

NeuroPB: Scaling Neural Decoding with Pretrained Behavioral Representations

シェア:XThreadsFacebookLINEはてブBluesky

大規模な行動データから事前学習した運動エンコーダを神経活動に転移させ、限られたペアデータで神経信号から連続運動を高精度に再構成するフレームワークを提案。ロボット軌道での事前学習がマカク軌道と同等の性能を示し、データ規模拡大で性能が向上することを実証。

詳しい要約

1. どんなもの?

NeuroPBは、大規模な行動データから事前学習した行動表現を用いて神経デコードをスケールするフレームワークである。まず、大規模な運動行動データでモーターエンコーダを事前学習し、その後、限られたペアの神経-行動記録を用いて神経活動をその行動表現空間に整列させる。神経エンコーダと軽量なモーターデコーダを最適化し、整列された神経表現から連続的な運動を再構成する。

2. 先行研究と比べてどこがすごい?

従来の神経デコーダは、神経記録の限られたスケールと不均一性に制約されていた。NeuroPBは、より容易に大規模に収集できる行動データを活用し、事前学習によって神経デコードの性能を向上させる点が新しい。特に、ロボットの軌跡での事前学習がマカクの軌跡と同等の性能を示し、生物と人工モデル間で転移可能な運動学的構造が共有されることを実証した点が優れている。

3. 技術・手法の肝は?

手法の肝は、行動データでの事前学習と神経活動の整列である。具体的には、まず大規模な運動行動データでモーターエンコーダを事前学習し、次に限られたペアデータを用いて神経活動をその表現空間に整列させる。その後、神経エンコーダと軽量なモーターデコーダを最適化して連続運動を再構成する。

4. どうやって有効だと検証した?

複数のマカク運動データセットで検証し、center-outタスクでR^2が11%、random-targetで8%向上した。また、ロボット軌跡での事前学習がマカク軌跡と同等の性能を示し、ロボット事前学習データのスケールと多様性が増すとデコード性能が向上した。さらに、セッション間、被験者間、タスク間の一般化が向上し、わずか10%のキャリブレーションでスクラッチ学習に匹敵する性能を達成した。

5. 議論はある?

要旨からは、行動事前学習が神経デコードのスケーラブルな源となることを示しているが、具体的な議論や限界については不明。例えば、異なる神経記録モダリティや臨床応用への影響、事前学習データの質や多様性の影響などは要旨に含まれていない。

6. 次に読むべき論文は?

要旨で参照されている研究は明示されていないが、関連する手法として、神経デコードにおける事前学習や転移学習の研究、行動データを用いた表現学習の研究が挙げられる。具体的には、BCIにおける教師なし事前学習や、大規模な運動データを用いたモーターエンコーダの事前学習に関する論文が関連する。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Luyao Jin, Yonghao Song, Huan Zhao, Vincent C. K. Cheung, Wei-Hsin Liao

分類: cs.LG

原文アブストラクト

Decoding continuous motor trajectories from neural activity is essential for developing practical brain-computer interfaces (BCIs). However, current neural decoders are constrained by the limited scale and heterogeneity of neural recordings. In contrast, behavioral data can be collected more readily and at substantially larger scale from humans, animals, simulations, and robotic systems. Here, we introduce NeuroPB, a framework that scales neural decoding by transferring knowledge from pretrained behavioral representations. NeuroPB first pretrains a motor encoder on large-scale motor behavior data and then aligns neural activity with the resulting behavioral representation space using a limited set of paired neural-behavioral recordings. A neural encoder and lightweight motor decoder are subsequently optimized to reconstruct continuous movement from the aligned neural representations. Across multiple macaque motor datasets, behavioral pretraining improves trajectory decoding, including an 11% $R^2$ increase on center-out and 8% on random-target compared with training the motor encoder from scratch. Notably, pretraining on robotic trajectories achieves performance comparable to pretraining on macaque trajectories, demonstrating that transferable kinematic structure is shared across biological and artificial models. Moreover, decoding performance improves as the scale and diversity of robotic pretraining data increase, when the amount of neural data is fixed. Pretraining also enhances generalization across recording sessions, subjects, and motor tasks, with only 10% calibration needed to match training from scratch. Overall, these results establish behavioral pretraining as a scalable source for neural decoding and provide a promising route toward high-performance and calibration-efficient BCIs under limited neural data.