日本フィジカルAI新聞

世界のフィジカルAIを、日本語で。

歩行arXiv:2611.26074

生物学的に妥当なスパイキングネットワークによるヒューマノイドロボットH1-2の制御

Controlling the Humanoid Robot H1-2 With a Simulated Biologically Plausible Network

シェア:XThreadsFacebookLINEはてブBluesky

スパイキングニューラルネットワークを3種の学習則で訓練し、Unitree H1-2ヒューマノイドの歩行制御性能を比較。e-propがBPTTと同等の100%生存率を達成した一方、固定リザバーや報酬変調STDPは低性能に留まった。

詳しい要約

1. どんなもの?

- 本研究は、生物学的に妥当な Spiking Neural Network を用いて humanoid robot の H1-2 Unitree Humanoid の locomotion 制御を目指す研究である。 - 提案する spiking network を複数の学習スキームで訓練し、H1-2 上で検証している。 - 学習スキームは recurrent weights の訓練方法で区別され、生物学的忠実度の高い順に、固定 reservoir(in-vitro neural culture を模倣)、reward-modulated spike timing dependent plasticity と eligibility propagation、非生物学的 baseline として backpropagation through time が用いられる。 - すべてのスキームは reinforcement learning expert policy の distillation と dataset aggregation に依拠している。

2. 先行研究と比べてどこがすごい?

- 先行研究では Artificial Spiking Neural Networks が生物学的 neural cultures の活動や傾向を模倣できることが示されてきたが、humanoid locomotion を生物学的妥当性と堅牢な性能を両立して訓練できるかは未解決であった。 - 本研究はこの問いに取り組み、生物学的忠実度の異なる複数の学習スキームを同一の spiking network と H1-2 上で比較した点が新しい。 - e-prop が backpropagation through time と同等の 100% survival rate に到達した一方、固定 reservoir と reward-modulated STDP はそれぞれ約 43.7% と約 11% に留まったことを示した。 - 実 culture がこれまで再現できた/できなかった傾向についても詳細に検討している。

3. 技術・手法の肝は?

- 生物学的に着想を得た spiking network を構築し、H1-2 Unitree Humanoid に適用している。 - recurrent weights の訓練方法として、固定 reservoir(recurrent weights を凍結し linear readout のみ訓練)、reward-modulated spike timing dependent plasticity と eligibility propagation、backpropagation through time の 3 系統を比較している。 - すべてのスキームで reinforcement learning expert policy の distillation と dataset aggregation を利用している。 - 最終的に full size humanoid H1-2 上で brief bipedal stepping を実演している。

4. どうやって有効だと検証した?

- H1-2 Unitree Humanoid 上で各学習スキームをテストし、survival rate で評価している。 - e-prop は 100% survival rate で backpropagation through time と同等であった。 - 固定 reservoir は約 43.7%、reward-modulated STDP は約 11% の survival rate に留まった。 - full size humanoid H1-2 上で brief bipedal stepping を実演することで有効性を示している。

5. 議論はある?

- 生物学的忠実度が最も高い固定 reservoir と reward-modulated STDP は、性能が大幅に低い水準で頭打ちになった。 - 実 culture がこれまでに再現できた傾向とできなかった傾向についてさらに詳細に検討している。 - 生物学的妥当性と堅牢な性能の両立に関する議論が含まれると考えられるが、具体的な議論の詳細は要旨からは不明。

6. 次に読むべき論文は?

- eligibility propagation (e-prop) に関する論文。 - reward-modulated spike timing dependent plasticity (STDP) に関する研究。 - backpropagation through time を用いた spiking network の学習に関する研究。 - reinforcement learning expert policy の distillation と dataset aggregation に関する研究。 - in-vitro neural culture や reservoir computing に関する研究。

※ AIが要旨から生成した要約です。正確性は原文をご確認ください。

著者: Fatima Atwi, Constant Roux, Christian Bergaud, Olivier Stasse

分類: cs.AI, cs.RO

原文アブストラクト

Artificial Spiking Neural Networks have gained remarkable attention in the last few years due to their proven ability in simulating biological neural cultures and producing similar activity and trends. Nevertheless, whether they can be trained for humanoid locomotion while retaining biological plausibility and robust performance at once remains an open question. We study this problem by proposing a biologically inspired spiking network, trained by different learning schemes and tested on the H1-2 Unitree Humanoid. These schemes differ in how recurrent weights are trained. Ordered from most to least biologically faithful, they are: a fixed reservoir mimicking an in-vitro neural culture, where recurrent weights are kept frozen and only a linear readout is trained, the same network but with its synapses trained by reward-modulated spike timing dependent plasticity and eligibility propagation, and finally backpropagation through time as a non biological baseline for comparison. All schemes relied on distillation of a reinforcement learning expert policy with dataset aggregation. We show that e-prop reached 100% survival rate matching backpropagation through time, whereas both the fixed reservoir and the reward-modulated STDP, though the closest to biological cultures, plateaued at a much lower performance (~43.7% and ~11% survival). We explore in further detail which trends a real culture could and could not produce until now. Finally we demonstrate brief bipedal stepping on a full size humanoid H1-2.

関連論文

  1. 1パナソニックHDなど、触覚に即応する両手作業AI「T-Rex」を共同開発研究・技術
  2. 2川崎重工業のロボット外販を報道新製品・発表
  3. 3Boston Dynamics、GlobalFoundriesでAtlasを試験へ 半導体製造で2027年初頭から半導体・GPU
  4. 4丸文、RealManのロボットアームやヒューマノイドを国内販売提携・買収
  5. 5NVIDIA、SC26で科学研究向けAIエージェントとHPC基盤を発表新製品・発表

PR・アフィリエイト広告

FRONTIER(GPU搭載BTOパソコン)

FRONTIER(GPU搭載BTOパソコン)の公式広告バナーFRONTIERでGPU搭載PCを見る ↗
PR本紙発行元 EmplifAI