Synaptic bundle theory for spike-driven sensor-motor system: More than eight independent synaptic bundles collapse reward-STDP learning

2508.14492v1 q-bio.NC, cs.AI, nlin.AO 2025-08-22
Авторы:

Takeshi Kobayashi, Shogo Yonekura, Yasuo Kuniyoshi

Резюме на русском

## Контекст Одна из основных проблем в развитии искусственных сенсорно-моторных систем лежит в том, что нейронные импульсы, которые управляют движениями, применяются неэффективно для обучения в артифициальных системах. Это приводит к условию, когда увеличение количества нейронов или синаптических связей приводит к столкновению системы обучения, ограничивая возможность эффективного применения сигналов пиков в таких системах. В данном исследовании рассматривается мотивация для развития системы, которая позволяет изменять количество независимых синаптических связей, чтобы оптимизировать процесс обучения и избежать условия столкновения. Эта проблема имеет решаемость, если будет выявлена критическая граница, за которой можно сохранить эффективность обучения. ## Метод Методология работы заключается в исследовании динамики управления нейронными пиками в системе с разным количеством синаптических связей. Разработана модель системы, позволяющая варьировать количество нейронов и синаптических связей. Использованы алгоритмы обучения, основанные на законе леарнинга (reward-STDP), чтобы изучить проблемы возникающие при превышении критического числа синаптических связей. Архитетктура системы включает моделирование нейронных сетей с возможностью управления количеством независимых синаптических компонентов в связи сенсор-мотор. Экспериментальные условия включали разные уровни комплектов нейронов и синаптических связей, чтобы изучить их влияние на процесс обучения. ## Результаты Исследование показало, что при превышении критического числа нейронов или синаптических связей возникает коллизия в обучении. Уменьшение количества нейронов в системе приводит к ускорению процесса обучения, но при этом увеличивает риск неудач. Также было выявлено, что число негативных обновлений весов (отклонений от оптимального значения) может служить показателем для оценки успешности обучения. Эксперименты показали, что существует оптимальный диапазон количества нейронов, в котором обучение не только выполняется быстрее, но и более стабильно. Эти результаты подтверждают, что нетривиальные механизмы необходимы для сохранения устойчивости обучения в системах с возможностью корректировки синаптических связей. ## Значимость Нахождение оптимального диапазона количества нейронов и синаптических связей открывает новые возможности для исследования функций нейронных пиков в сенсорно-моторных системах. Это может привлечь интерес к разработке более эффективных алгоритмов обучения, основанных на сигналах пиков, для искусственных систем. Полученные результаты могут бы

Abstract

Neuronal spikes directly drive muscles and endow animals with agile movements, but applying the spike-based control signals to actuators in artificial sensor-motor systems inevitably causes a collapse of learning. We developed a system that can vary \emph{the number of independent synaptic bundles} in sensor-to-motor connections. This paper demonstrates the following four findings: (i) Learning collapses once the number of motor neurons or the number of independent synaptic bundles exceeds a critical limit. (ii) The probability of learning failure is increased by a smaller number of motor neurons, while (iii) if learning succeeds, a smaller number of motor neurons leads to faster learning. (iv) The number of weight updates that move in the opposite direction of the optimal weight can quantitatively explain these results. The functions of spikes remain largely unknown. Identifying the parameter range in which learning systems using spikes can be constructed will make it possible to study the functions of spikes that were previously inaccessible due to the difficulty of learning.

Ссылки и действия