📊 Статистика дайджестов
Всего дайджестов: 34022 Добавлено сегодня: 0
Последнее обновление: сегодня
📄 Revisiting Direct Encoding: Learnable Temporal Dynamics for Static Image Spiking Neural Networks
2025-12-04Авторы:
Huaxu He
Саммари на русском не найдено
Доступные поля: ['id', 'arxiv_id', 'title', 'authors', 'abstract', 'summary_ru', 'categories', 'published_date', 'created_at']
Доступные поля: ['id', 'arxiv_id', 'title', 'authors', 'abstract', 'summary_ru', 'categories', 'published_date', 'created_at']
Annotation:
Handling static images that lack inherent temporal dynamics remains a fundamental challenge for spiking neural networks (SNNs). In directly trained SNNs, static inputs are typically repeated across time steps, causing the temporal dimension to collapse into a rate like representation and preventing meaningful temporal modeling. This work revisits the reported performance gap between direct and rate based encodings and shows that it primarily stems from convolutional learnability and surrogate gr...
Авторы:
Hyunho Kook, Byeongho Yu, Jeong Min Oh, Eunhyeok Park
Саммари на русском не найдено
Доступные поля: ['id', 'arxiv_id', 'title', 'authors', 'abstract', 'summary_ru', 'categories', 'published_date', 'created_at']
Доступные поля: ['id', 'arxiv_id', 'title', 'authors', 'abstract', 'summary_ru', 'categories', 'published_date', 'created_at']
Annotation:
Recent advancements in the direct training of Spiking Neural Networks (SNNs) have demonstrated high-quality outputs even at early timesteps, paving the way for novel energy-efficient AI paradigms. However, the inherent non-linearity and temporal dependencies in SNNs introduce persistent challenges, such as temporal covariate shift (TCS) and unstable gradient flow with learnable neuron thresholds. In this paper, we present two key innovations: MP-Init (Membrane Potential Initialization) and TrSG ...
📄 TDSNNs: Competitive Topographic Deep Spiking Neural Networks for Visual Cortex Modeling
2025-08-09Авторы:
Deming Zhou, Yuetong Fang, Zhaorui Wang, Renjing Xu
Модели визуального коры, характеризующиеся топографическим устройством, где специализированные нейроны сгруппированы в зависимости от их функций, хорошо удовлетворяют требованиям эффективности обработки. Однако традиционные глубокие нейронные сети (DNNs), несмотря на их успех в задачах распознавания объектов, не учитывают важность временных динамик в процессе обучения. Эти модели часто показывают низкий уровень поддержки биологической природы и нарушают логику топографической организации. В нашей работе мы предлагаем Topographic Deep Spiking Neural Networks (TDSNNs), которые интегрируют гибридную структуру SNN, заложив в нее не только топографическую организацию, но и временные динамики. Это ставит TDSNN в центр внимания как модели, которая эффективно реплицирует топографические особенности визуальной коры. Мы показали, что наша модель демонстрирует значительно меньшую потерю точности (в том числе на ImageNet) по сравнению с лучшими топографическими DNNs, при этом она показывает лучшую биологическую эмуляцию. Эти результаты указывают на то, что TDSNN может стать мощным инструментом для развития эмуляторов нейронных систем в области AI.
Annotation:
The primate visual cortex exhibits topographic organization, where
functionally similar neurons are spatially clustered, a structure widely
believed to enhance neural processing efficiency. While prior works have
demonstrated that conventional deep ANNs can develop topographic
representations, these models largely neglect crucial temporal dynamics. This
oversight often leads to significant performance degradation in tasks like
object recognition and compromises their biological fidelity. To addr...