📊 Статистика дайджестов

Всего дайджестов: 34022 Добавлено сегодня: 82

Последнее обновление: сегодня
Авторы:

Marco Cafiso, Paolo Paradisi

## Контекст На протяжении многих лет в области компьютерных наук и компьютерной нейроники возникали интересные модели нейронных сетей, способных хранить память. Одним из ключевых примеров является Hopfield-сеть, которая была разработана для решения задач содержательного доступа к памяти. Несмотря на то, что эта модель была тщательно исследована в различных сферах, остается необходимость в глубжейших исследованиях временных динамик в нейронных сетях. Биологические нейронные сети характеризуются не только структурными особенностями, но и свойствами временной динамики. Тем не менее, мало численно изучены различия временных динамик нейронных сетей в зависимости от их топологий. В настоящей работе мы применяем подход, основанный на теории временной сложности (TC), для изучения интермабильности состояний в новом видео-ориентированной модели типа Hopfield. Результаты исследования позволяют углубить понимание того, как различные топологии влияют на временную структуру динамики в сетях. ## Метод Мы использовали новый вид носителя, основанный на модели типа Hopfield, для изучения временной сложности в нейронных сетях. Наш алгоритм настроен на разработку и анализ темпов взаимодействия в сетях с различными топологиями, включая сети с неравномерным распределением связей (scale-free) и случайные сети. Мы определили несколько параметров для измерения временной сложности, таких как показатели метастабильности, интервалы между событиями и общая активность сети. Эксперименты проводились с использованием моделей разных топологий, и мы сравнивали их поведение на основе полученных данных. Это позволило нам выявить влияние топологии на временные характеристики динамики сети. ## Результаты Наши эксперименты показали, что обе топологии — scale-free и случайные — демонстрируют сходные характеристики временной сложности. Однако scale-free сети проявляют большую метастабильность и меньшую шумоизменную активность. На основе показателей TC мы отметили, что оба типа сетей имеют сходные темпы метастабилизации и активности, но в scale-free сетях это происходит с меньшим шумом. Более того, в scale-free сетях было замечено большое количество "центров" (hubs), которые играли ключевую роль в динамике сети, что подтвердило их важность в хранении и обработке информации. ## Значимость Такие исследования имеют потенциал для расширения применений нейронных сетей в биологических системах и машинном обучении. Наш анализ показал, что топология сети может сильно влиять на ее временную структуру и динамику. Scale-free сети, благодаря своим центральным узлам, оказались более эффективными в хранении
Annotation:
Neural network models capable of storing memory have been extensively studied in computer science and computational neuroscience. The Hopfield network is a prototypical example of a model designed for associative, or content-addressable, memory and has been analyzed in many forms. Further, ideas and methods from complex network theory have been incorporated into artificial neural networks and learning, emphasizing their structural properties. Nevertheless, the temporal dynamics also play a vital...
ID: 2509.18758v1 q-bio.NC, cs.AI, nlin.AO, physics.bio-ph
Авторы:

Takeshi Kobayashi, Shogo Yonekura, Yasuo Kuniyoshi

## Контекст Одна из основных проблем в развитии искусственных сенсорно-моторных систем лежит в том, что нейронные импульсы, которые управляют движениями, применяются неэффективно для обучения в артифициальных системах. Это приводит к условию, когда увеличение количества нейронов или синаптических связей приводит к столкновению системы обучения, ограничивая возможность эффективного применения сигналов пиков в таких системах. В данном исследовании рассматривается мотивация для развития системы, которая позволяет изменять количество независимых синаптических связей, чтобы оптимизировать процесс обучения и избежать условия столкновения. Эта проблема имеет решаемость, если будет выявлена критическая граница, за которой можно сохранить эффективность обучения. ## Метод Методология работы заключается в исследовании динамики управления нейронными пиками в системе с разным количеством синаптических связей. Разработана модель системы, позволяющая варьировать количество нейронов и синаптических связей. Использованы алгоритмы обучения, основанные на законе леарнинга (reward-STDP), чтобы изучить проблемы возникающие при превышении критического числа синаптических связей. Архитетктура системы включает моделирование нейронных сетей с возможностью управления количеством независимых синаптических компонентов в связи сенсор-мотор. Экспериментальные условия включали разные уровни комплектов нейронов и синаптических связей, чтобы изучить их влияние на процесс обучения. ## Результаты Исследование показало, что при превышении критического числа нейронов или синаптических связей возникает коллизия в обучении. Уменьшение количества нейронов в системе приводит к ускорению процесса обучения, но при этом увеличивает риск неудач. Также было выявлено, что число негативных обновлений весов (отклонений от оптимального значения) может служить показателем для оценки успешности обучения. Эксперименты показали, что существует оптимальный диапазон количества нейронов, в котором обучение не только выполняется быстрее, но и более стабильно. Эти результаты подтверждают, что нетривиальные механизмы необходимы для сохранения устойчивости обучения в системах с возможностью корректировки синаптических связей. ## Значимость Нахождение оптимального диапазона количества нейронов и синаптических связей открывает новые возможности для исследования функций нейронных пиков в сенсорно-моторных системах. Это может привлечь интерес к разработке более эффективных алгоритмов обучения, основанных на сигналах пиков, для искусственных систем. Полученные результаты могут бы
Annotation:
Neuronal spikes directly drive muscles and endow animals with agile movements, but applying the spike-based control signals to actuators in artificial sensor-motor systems inevitably causes a collapse of learning. We developed a system that can vary \emph{the number of independent synaptic bundles} in sensor-to-motor connections. This paper demonstrates the following four findings: (i) Learning collapses once the number of motor neurons or the number of independent synaptic bundles exceeds a cri...
ID: 2508.14492v1 q-bio.NC, cs.AI, nlin.AO