📊 Статистика дайджестов

Всего дайджестов: 34123 Добавлено сегодня: 101

Последнее обновление: сегодня
Авторы:

Jonathan Baxter

Саммари на русском не найдено
Доступные поля: ['id', 'arxiv_id', 'title', 'authors', 'abstract', 'summary_ru', 'categories', 'published_date', 'created_at']
Annotation:
In this paper we investigate a neural network model in which weights between computational nodes are modified according to a local learning rule. To determine whether local learning rules are sufficient for learning, we encode the network architectures and learning dynamics genetically and then apply selection pressure to evolve networks capable of learning the four boolean functions of one variable. The successful networks are analysed and we show how learning behaviour emerges as a distributed...
ID: 2512.01203v1 cs.NE, cs.LG
Авторы:

Jiajun Zhan, Zeyuan Ma, Yue-Jiao Gong, Kay Chen Tan

Саммари на русском не найдено
Доступные поля: ['id', 'arxiv_id', 'title', 'authors', 'abstract', 'summary_ru', 'categories', 'published_date', 'created_at']
Annotation:
Evolutionary multitasking (EMT) algorithms typically require tailored designs for knowledge transfer, in order to assure convergence and optimality in multitask optimization. In this paper, we explore designing a systematic and generalizable knowledge transfer policy through Reinforcement Learning. We first identify three major challenges: determining the task to transfer (where), the knowledge to be transferred (what) and the mechanism for the transfer (how). To address these challenges, we for...
ID: 2511.15199v1 cs.NE, cs.LG
Авторы:

Ivan Kartashov, Mariia Pushkareva, Iakov Karandashev

Саммари на русском не найдено
Доступные поля: ['id', 'arxiv_id', 'title', 'authors', 'abstract', 'summary_ru', 'categories', 'published_date', 'created_at']
Annotation:
This paper introduces SpikeFit, a novel training method for Spiking Neural Networks (SNNs) that enables efficient inference on neuromorphic hardware, considering all its stringent requirements: the number of neurons and synapses that can fit on a single device, and lower bit-width representations (e.g., 4-bit, 8-bit). Unlike conventional compressing approaches that address only a subset of these requirements (limited numerical precision and limited number of neurons in the network), SpikeFit tre...
ID: 2510.15542v1 cs.NE, cs.LG, q-bio.NC
Авторы:

Balázs Mészáros, James C. Knight, Jonathan Timcheck, Thomas Nowotny

Саммари на русском не найдено
Доступные поля: ['id', 'arxiv_id', 'title', 'authors', 'abstract', 'summary_ru', 'categories', 'published_date', 'created_at']
Annotation:
Spiking Neural Networks are attracting increased attention as a more energy-efficient alternative to traditional Artificial Neural Networks for edge computing. Neuromorphic computing can significantly reduce energy requirements. Here, we present a complete pipeline: efficient event-based training of SNNs with synaptic delays on GPUs and deployment on Intel's Loihi 2 neuromorphic chip. We evaluate our approach on keyword recognition tasks using the Spiking Heidelberg Digits and Spiking Speech Com...
ID: 2510.13757v1 cs.NE, cs.LG
Авторы:

Marco Cococcioni, Dario Pagani, Federico Rossi

Саммари на русском не найдено
Доступные поля: ['id', 'arxiv_id', 'title', 'authors', 'abstract', 'summary_ru', 'categories', 'published_date', 'created_at']
Annotation:
The increasing computational and memory demands of large language models (LLMs) necessitate innovative approaches to optimize resource usage without compromising performance. This paper leverages microscaling floating-point formats, a novel technique designed to address these challenges by reducing the storage and computational overhead associated with numerical representations in LLMs. Unlike traditional floating-point representations that allocate a dedicated scale for each value, microscaling...
ID: 2510.01863v1 cs.NE, cs.LG
Авторы:

Sankar Vinayak. E. P, Gopalakrishnan Srinivasan

Саммари на русском не найдено
Доступные поля: ['id', 'arxiv_id', 'title', 'authors', 'abstract', 'summary_ru', 'categories', 'published_date', 'created_at']
Annotation:
Equilibrium propagation has been proposed as a biologically plausible alternative to the backpropagation algorithm. The local nature of gradient computations, combined with the use of convergent RNNs to reach equilibrium states, make this approach well-suited for implementation on neuromorphic hardware. However, previous studies on equilibrium propagation have been restricted to networks containing only dense layers or relatively small architectures with a few convolutional layers followed by a ...
ID: 2509.26003v1 cs.NE, cs.LG
Авторы:

Dat Thanh Tran, Khai Quang Tran, Khoi Anh Pham, Van Khu Vu, Dong Duc Do

## Контекст В последние десятилетия, тра traveding salesman problem (TSP) остается одним из самых важных задач в теории задач оптимального планирования и распределения. Эта задача широко применяется в логистике, производстве, транспорте и других сферах. Однако существующие алгоритмы для ее решения часто сталкиваются с проблемами, такими как высокое время вычисления, ограниченная точность решения и неэффективность при работе с большими данными. Этот факт пробуждает необходимость развития новых, более эффективных подходов для решения TSP. ## Метод NeuFACO — это нейронная система, которая сочетает в себе преимущества нейронных сетей и Ant Colony Optimization (ACO). В ее основе лежит Proximal Policy Optimization (PPO) с энтропийным регуляризатором, который обучает графовую нейронную сеть для прогнозирования эффективных графовых путей. Графовая нейронная сеть интегрируется в оптимизированный ACO-фреймворк, который включает такие компоненты, как candidate lists, restricted tour refinement и scalable local search. Эта комбинация позволяет улучшить качество решения и уменьшить вычислительные затраты. ## Результаты Проверена эффективность NeuFACO на различных TSP-проблемах, включая large-scale и benchmark-проблемы. Использовались подготовленные наборы данных TSP, такие как TSPLIB и real-world TSP instances. Результаты показывают, что NeuFACO демонстрирует высокую точность и эффективность в сравнении с существующими методами, такими как classical ACO и некоторые нейронные расширения. Это доказывает мощь NeuFACO в генерации качественных решений за короткое время. ## Значимость NeuFACO может быть применен в логистике, промышленности и других областях, где необходимо оптимизировать маршруты, уменьшить затраты и увеличить эффективность. Он предоставляет более быстрое и точное решение TSP в сравнении с традиционными методами. Благодаря своей нейронно-коллективной структуре, NeuFACO также открывает новые возможности для гибкой адаптации и использования в различных контекстах. ## Выводы NeuFACO представляет собой прорыв в области решения TSP, объединяя нейронные сети и ACO в уникальной структуре. Он доказывает свою эффективность на различных TSP-проблемах и открывает пути для дальнейшего исследования в области нейро-коллективных алгоритмов. Будущие исследования будут нацелены на улучшение гибкости NeuFACO и его применение в других задачах оптимального решения.
Annotation:
This study presents Neural Focused Ant Colony Optimization (NeuFACO), a non-autoregressive framework for the Traveling Salesman Problem (TSP) that combines advanced reinforcement learning with enhanced Ant Colony Optimization (ACO). NeuFACO employs Proximal Policy Optimization (PPO) with entropy regularization to train a graph neural network for instance-specific heuristic guidance, which is integrated into an optimized ACO framework featuring candidate lists, restricted tour refinement, and sca...
ID: 2509.16938v2 cs.NE, cs.LG
Авторы:

Nitin Gupta, Bapi Dutta, Anupam Yadav

## Контекст Particle Swarm Optimization (PSO) является одним из самых популярных алгоритмов стохастической оптимизации, основанных на имитации поведения стадов. Он применяется для решения различных задач оптимизации в области инженерии, экономики, биологии и даже искусственного интеллекта. Несмотря на свою эффективность, PSO и другие алгоритмы стохастической оптимизации часто сталкиваются с проблемой нехватки транспарентности. Трудность в понимании того, как именно работают оптимизационные методы, ограничивает их применение в решении комплексных задач. Более того, важным аспектом является влияние различных топологий (сетевых структур) на процесс оптимизации. Эта работа адресует эти проблемы, сфокусировавшись на изучении влияния топологий на PSO с помощью ландшафтного анализа и машинного обучения. ## Метод Для изучения влияния топологий PSO использовалось ландшафтный анализ (Exploratory Landscape Analysis, ELA). Это методология позволяет оценить характеристики задачи оптимизации и уточнить ключевые факторы, влияющие на процесс оптимизации. Для ландшафтного анализа взяты 24 стандартные функции оптимизации разной сложности и размерности. Также в рамках работы проводилось сравнение трех основных топологий PSO: Ring, Star и Von Neumann. Далее, для автоматизированной конфигурации PSO внедрена машинная логика, основанная на обучении моделей машинного обучения с использованием обширных данных о поведении алгоритма (например, Area over the Convergence Curve, AOCC). Эта модель позволяет рекомендовать оптимальные параметры PSO в зависимости от характеристик задачи. ## Результаты Результаты экспериментов показали, что каждая топология PSO (Ring, Star и Von Neumann) оказывает свой уникальный влияние на баланс эксплорэксплуатации (exploration-exploitation), на выравнивание конвергенции и, в конечном итоге, на качество решения. Например, Star topology более эффективна в фазе эксплорации, в то время как Ring topology обеспечивает более стабильную конвергенцию. Были разработаны практические рекомендации для топологии и параметров PSO в зависимости от сложности задачи. Также был создан бенчмарк, позволяющий понять, как разные топологии влияют на информационный поток, разнообразие решений и конвергенцию. ## Значимость Разработанная фреймворк позволяет лучше понимать PSO и другие алгоритмы стохастической оптимизации. Он может быть применен в различных областях, где необходима транспарентность решений (например, в искусственном интеллекте, биологии, экономике). Одним из преимуществ является возможность рекомендовать оптимальные параметры для PSO в зависимости от конкретной задачи. Это не только улучшает эффективность решения
Annotation:
Swarm intelligence algorithms have demonstrated remarkable success in solving complex optimization problems across diverse domains. However, their widespread adoption is often hindered by limited transparency in how algorithmic components influence performance. This work presents a multi-faceted investigation of Particle Swarm Optimization (PSO) to further understand the key role of different topologies for better interpretability and explainability. To achieve this objective, we first develop a...
ID: 2509.06272v1 cs.NE, cs.LG
Авторы:

Rivaaj Monsia, Olivier Francon, Daniel Young, Risto Miikkulainen

## Контекст В последние годы искусственный интеллект (AI) применяется во многих областях, в том числе в управлении системами, такими как системы очистки воды. Управление чаорлингом воды является критическим аспектом обеспечения безопасности и качества воды. Однако существуют сложности в создании эффективных алгоритмов управления, которые могут адаптироваться к различным условиям окружающей среды и динамическим изменениям ввода. На IJCAI-2025 была проведена 1-ая AI for Drinking Water Chlorination Challenge, направленная на развитие систем управления чаорлингом, которые могут принимать многоцелевые решения и обучаться в реальном времени. В этом контексте появилась идея Evolutionary Surrogate-Assisted Prescription (ESP), предлагающая сочетать эволюционные методы с суррогатными моделями для облегчения обучения и улучшения решений в задачах реального мира. ## Метод Evolutionary Surrogate-Assisted Prescription (ESP) является комбинацией эволюционных алгоритмов и суррогатных моделей. Эволюционные алгоритмы используются для поиска оптимальных решений в многоцелевой задаче, тогда как суррогатные модели используются для эффективного приближения высокосложной функции целевой функции. Архитектура ESP включает в себя несколько этапов: (1) построение суррогатной модели на основе исходных данных, (2) использование эволюционного алгоритма для оптимизации решений, с помощью которого многоцелевые функции могут быть оптимизированы, (3) интеграция результатов оптимизации в систему управления, чтобы обеспечить реального времени управление. Этот подход позволяет обрабатывать сложные и многомерные задачи, такие как управление чаорлингом воды, с меньшим вычислительным временем и более точным решением. ## Результаты В ходе экспериментов, проведенных на данных 1-й AI for Drinking Water Chlorination Challenge, были получены заметные улучшения в производительности управления чаорлингом в сравнении с современными методами. ESP показал свою эффективность в уменьшении ошибок при определении оптимальных значений для многоцелевых функций, таких как уровни чаорлинга, концентрация воды и другие параметры. Эксперименты также показали, что ESP может быстрее адаптироваться к динамическим изменениям ввода, что является ключевым для динамического управления в реальном времени. Эти результаты демонстрируют потенциал ESP в решении сложных задач многоцелевого управления в среде реального мира. ## Значимость Помимо применения в управлении чаорлингом воды, Evolutionary Surrogate-Assisted Prescription может быть использован в других областях, где требуется эффективное решение многоцелевых задач, такие как автоматизация промышленных процессов, энергетические системы и управление роботами. ESP демонстрирует преиму
Annotation:
This short, written report introduces the idea of Evolutionary Surrogate-Assisted Prescription (ESP) and presents preliminary results on its potential use in training real-world agents as a part of the 1st AI for Drinking Water Chlorination Challenge at IJCAI-2025. This work was done by a team from Project Resilience, an organization interested in bridging AI to real-world problems.
ID: 2508.19173v1 cs.NE, cs.LG
Авторы:

Saptarshi Bej, Muhammed Sahad E, Gouri Lakshmi, Harshit Kumar, Pritam Kar, Bikas C Das

## Контекст Спайк-тренированные нейронные сети (SNN) представляют собой мощную архитектуру, которая моделирует структуру и функционал биологических нейронов, основываясь на спайке (сигнале) как на основном механизме передачи информации. Однако обучение таких сетей остается сложным делом из-за требования высокой эффективности и биологической аналогичности. Нейроны в SNN обычно обучаются с помощью механизмов, таких как Spike-Timing-Dependent Plasticity (STDP), который основывается на точном согласовании времени спайков. Тем не менее, STDP имеет ограничения, такие как высокая сложность вычислений и неэффективность в реализации на аппаратных устройствах. Из этого следует, что требуется более гибкий и эффективный механизм, который сочетает биологическую аналогичность с высокой скоростью и гибкостью ра implemenтации. ## Метод Мы предлагаем Spike Agreement Dependent Plasticity (SADP) — новую биологически вдохновленную синпсодный обучающий парадигму для SNN. SADP отличается от STDP тем, что не полагается на точное согласование времени спайков, а вместо этого использует метрики корреляции популяции, например, Cohen's kappa. Это позволяет SADP быть более структурной и гибкой в своих реализациях. Также мы предлагаем архитектуру, которая позволяет SADP иметь линейную сложность во времени, что делает его пригодным для эффективной реализации в аппаратных системах. Битвойшее логическое устройство используется для упрощения и ускорения вычислений. ## Результаты Мы провели эксперименты на MNIST и Fashion-MNIST, используя SADP в качестве обучающего правила. Наши результаты показали, что SADP превосходит классический STDP как по точности, так и по скорости. Мы также использовали данные от нашего ионно-тронного органического мемпереностава, внедрив spline-based kernels, что дало дополнительную улучшенную точность и скорость. Эти результаты подчеркивают силу SADP в сравнении с традиционными методами. ## Значимость Предложенная парадигма SADP имеет широкие области применения в обучении нейронных сетей, особенно в сферах, где требуется высокая скорость реагирования и эффективность, таких как биоинспирированные системы, робототехника и технологии ИИ. Наши методы предоставляют биологически более аналогичную структуру, повышая биологическую совместимость, при этом не теряя высокой производительности и эффективности. Это делает SADP важной концепцией для будущих развитий в области нейронных сетей и аппаратных реализаций. ## Выводы Мы представили SADP — новую биологически вдохновленную синпсодный обучающую парадигму для SNN. Наши результаты показали, что SADP
Annotation:
We introduce Spike Agreement Dependent Plasticity (SADP), a biologically inspired synaptic learning rule for Spiking Neural Networks (SNNs) that relies on the agreement between pre- and post-synaptic spike trains rather than precise spike-pair timing. SADP generalizes classical Spike-Timing-Dependent Plasticity (STDP) by replacing pairwise temporal updates with population-level correlation metrics such as Cohen's kappa. The SADP update rule admits linear-time complexity and supports efficient ha...
ID: 2508.16216v1 cs.NE, cs.LG
Показано 1 - 10 из 11 записей