NSPDI-SNN: An efficient lightweight SNN based on nonlinear synaptic pruning and dendritic integration

2508.21566v1 q-bio.NC, cs.AI, cs.NE 2025-09-02
Авторы:

Wuque Cai, Hongze Sun, Jiayi He, Qianqian Liao, Yunliang Zang, Duo Chen, Dezhong Yao, Daqing Guo

Резюме на русском

## Контекст Spiking neural networks (SNNs) являются видом искусственных нейронных сетей, основанным на моделировании биологических нейронов. Они привлекли внимание в артифициальном интеллекте благодаря своей эффективности в обработке информации и низкому потреблению ресурсов. Однако, существующие SNN-модели не достаточно эффективно имитируют сложность и гибкость дендритов биологических нейронов, которые играют ключевую роль в информационном обработке в мозгу. Эта проблема мотивирует развитие новых методов, которые были бы более близки к природе и эффективными в реализации. ## Метод Метод NSPDI-SNN (Nonlinear Synaptic Pruning and Dendritic Integration in Spiking Neural Networks) предлагает решение этой проблемы. Он включает два основных компонента: **нелинейное дендритное интегрирование (NDI)** и **нелинейное синаптическое редукционное (NSP)**. В NDI вводится нелинейное усиление влияния сигналов, проходящих через дендриты, что улучшает представление спато-временных данных. В NSP введена новая, гибкая структура синаптического редукционного процесса, которая достигает высокой спарсиности нейронных сетей без существенного потери эффективности. Метод эмпирически опробывался на трех датасетах (DVS128 Gesture, CIFAR10-DVS, CIFAR10) и двумя комплексными задачами (речевом распознавании и задаче развития на maze-решении). ## Результаты Эксперименты показали, что NSPDI-SNN показал высокую эффективность в уменьшении спарсиности с минимальной потерей показателей задачи. На датасетах DVS128 Gesture, CIFAR10-DVS и CIFAR10, NSPDI-SNN демонстрировал значительное превосходство по сравнению с другими моделями. На задачах речевого распознавания и развития на maze-решении, эта модель также продемонстрировала надежные результаты, обозначая широкую сферу применения. Дополнительная аналитика показала, что NSPDI-SNN сохраняет эффективность информационного передачи даже при увеличении спарсиности. ## Значимость Научная работа NSPDI-SNN имеет значительные приложения в сферах, требующих высокой эффективности и спарсиности нейронных сетей. Например, она может применяться в распознавании речи, обработке изображений и самообучении в сложных задачах. Особенно важным является его потенциал в сенсорных вычислениях, где необходимо минимизировать потребление энергии и увеличить скорость обработки. Этот метод открывает новые возможности для развития быстрых и энергоэффективных систем с учетом природы биологических нейронов. ## Выводы NSPDI-SNN демонстрирует значительный прогресь в развитии эффективных SNN-методов, используя сложность и нелинейность дендритов би

Abstract

Spiking neural networks (SNNs) are artificial neural networks based on simulated biological neurons and have attracted much attention in recent artificial intelligence technology studies. The dendrites in biological neurons have efficient information processing ability and computational power; however, the neurons of SNNs rarely match the complex structure of the dendrites. Inspired by the nonlinear structure and highly sparse properties of neuronal dendrites, in this study, we propose an efficient, lightweight SNN method with nonlinear pruning and dendritic integration (NSPDI-SNN). In this method, we introduce nonlinear dendritic integration (NDI) to improve the representation of the spatiotemporal information of neurons. We implement heterogeneous state transition ratios of dendritic spines and construct a new and flexible nonlinear synaptic pruning (NSP) method to achieve the high sparsity of SNN. We conducted systematic experiments on three benchmark datasets (DVS128 Gesture, CIFAR10-DVS, and CIFAR10) and extended the evaluation to two complex tasks (speech recognition and reinforcement learning-based maze navigation task). Across all tasks, NSPDI-SNN consistently achieved high sparsity with minimal performance degradation. In particular, our method achieved the best experimental results on all three event stream datasets. Further analysis showed that NSPDI significantly improved the efficiency of synaptic information transfer as sparsity increased. In conclusion, our results indicate that the complex structure and nonlinear computation of neuronal dendrites provide a promising approach for developing efficient SNN methods.

Ссылки и действия

Связанные статьи

A Unified Cortical Circuit Model with Divisive Normalization and Self-Excitation...

## Контекст Современные модели нейросетей стараются воспроизвести работу мозга, специализируясь на разных аспектах обраб...

2025-08-20