📊 Статистика дайджестов

Всего дайджестов: 34022 Добавлено сегодня: 0

Последнее обновление: сегодня
Авторы:

Qingzhu Zhang, Jiani Zhong, Zongsheng Li, Xinke Shen, Quanying Liu

Саммари на русском не найдено
Доступные поля: ['id', 'arxiv_id', 'title', 'authors', 'abstract', 'summary_ru', 'categories', 'published_date', 'created_at']
Annotation:
Task-specific pre-training is essential when task representations diverge from generic pre-training features. Existing task-general pre-training EEG models struggle with complex tasks like emotion recognition due to mismatches between task-specific features and broad pre-training approaches. This work aims to develop a task-specific multi-dataset joint pre-training framework for cross-dataset emotion recognition, tackling problems of large inter-dataset distribution shifts, inconsistent emotion ...
ID: 2510.22197v1 cs.LG, cs.AI, q-bio.NC
Авторы:

Saarang Panchavati, Corey Arnold, William Speier

#### Контекст Электроэнцефалография (EEG) является фундаментальным инструментом в диагностике нозологий неврологического профиля, включая эпилепсию и другие заболевания. Однако данные EEG обладают характеристиками, которые сложностью приводят к сложностям в анализе. Они являются шумными, в высоком разрешении и обладают сложной спатио-временной динамикой. Традиционные методы машинного обучения, хотя и демонстрируют успехи в автоматизации анализа EEG, часто недостаточно эффективны в учёте зависимостей в пространстве и времени. Недавние развития в области глубокого обучения, особенно в последовательном моделировании, предоставляют новые возможности для создания моделей, более гибких и выразительных, для этих задач. Модель Mamba-based selective state space, разработанная для решения этих задач, представляет собой оригинальный подход к улучшению EEG-анализа, предназначенный для характеристик данных EEG. #### Метод Метод, изложенный в статье, основывается на создании создании Mamba-based selective state space model, который направлен на обработку EEG-данных. Технической основой является создание селективной структуры, которая активно выбирает важные спатио-временные признаки. Модель обучается с использованием самостоятельного самостоятельного задания реконструкции, прежде чем предсказывать задачу детектирования сейзуров. Это подход сочетает в себе процессы обучения без подписи и супервизованного обучения, чтобы корректно учитывать характеристики данных EEG. Модель построена на основе базового моделирования, которое учитывает сложные зависимости в собственном многомерном пространстве. #### Результаты В ходе экспериментов был продемонстрирован эффектеность модели в задаче детектирования сейзуров на большом объёме данных, включая записи с и без сейзуров. Был получен результат с метрикой AUROC 0.72 на тестовой выборке, что является высоким показателем, указывающим на эффективность структуры модели. Также был продемонстрирован улучшение точности и стабильности в детектовании сейзуров по сравнению с базовыми методами. Эти результаты указывают на то, что модель Mamba-based selective state space может стать основой для более точного и доступного диагностического инструмента. #### Значимость Этот подход имеет значимый потенциал в области неврологии и анализа EEG. Он может повысить точность диагноза заболеваний, таких как эпилепсия, и других неврологических расстройств. Модель Mamba-based selective state space представляет собой значительный прорыв в создании большого масштаба моделей, пригодных для клинического применения. Благодаря своей выразительности и способности обрабатывать сложные спатио-временные данные, она может стать
Annotation:
This work explores the potential of foundation models, specifically a Mamba-based selective state space model, for enhancing EEG analysis in neurological disorder diagnosis. EEG, crucial for diagnosing conditions like epilepsy, presents significant challenges due to its noisy, high-dimensional, and nonlinear nature. Traditional machine learning methods have made advances in automating EEG analysis but often fail to capture its complex spatio-temporal dynamics. Recent advances in deep learning, p...
ID: 2509.02746v1 cs.LG, cs.AI, q-bio.NC
Авторы:

Qinwen Ge, Roza G. Bayrak, Anwar Said, Catie Chang, Xenofon Koutsoukos, Tyler Derr

## Контекст Область исследований, связанная с построением графов мозга (brain graphs) из изображений функциональной магнитной резонансной томографии (fMRI), широко используется в графовых методах машинного обучения для нейроимминджинга. Однако, существующие подходы часто ограничиваются строгими и заранее заданными процессами, которые не учитывают важные вопросы, связанные с выбором данных и применением методов. Отсутствие гибкости в этих аспектах может привести к снижению качества результатов. Данная работа привлекла к своему основному фокусу перспективы Data-Centric AI, чтобы систематически определить и оценить пространство дизайна, связанное с построением графов мозга, с отклонением от модельно-центрических подходов, которые предшествовали. Наша цель заключается в том, чтобы проанализировать влияние различных данных и технических решений на точность классификации. ## Метод Методология исследования основывается на систематизации дизайн-пространства, связанного с построением графов мозга, и его разделении на три этапа: **обработка временных сигналов**, **экстракция топологии** и **графовая фичеризация**. Мы проводим эксперименты с использованием двух датасетов: HCP1200 и ABIDE. Наша методика включает в себя исследование стратегий, таких как фильтрация высокочастотных сигналов, стратегии спарсинга и объединения топологии, а также использование альтернативных метрик корреляции и много birds-eye view-подходов для включения локальных динамик. Мы не стремимся к разработке новых методов, а вместо этого оцениваем интеракцию существующих методов и модификаций для улучшения результатов. ## Результаты Проведенные эксперименты показали, что данные, строго оптимизированные на стадиях обработки, топологии и фичеризации, позволяют значительно улучшить точность классификации по сравнению с традиционными подходами. На датасете HCP1200, использование специально экстрагированных и фильтрованных данных привело к улучшению точности в несколько процентов. Аналогичные результаты были получены на ABIDE, где обработка данных с учетом многоуровневой топологии и многогранных фичей дала значительный прирост. Эти результаты указывают на важность тщательной настройки каждого этапа построения графов мозга и подчеркивают значимость выбора данных. ## Значимость Результаты этого исследования имеют большое значение для области нейроимминджинга, где графы мозга используются для диагностики, мониторинга и исследования различных расстройств мозга. Наш подход, ориентированный на данные, показал, что улучшение качества данных и точности стратегий подбора мо
Annotation:
The construction of brain graphs from functional Magnetic Resonance Imaging (fMRI) data plays a crucial role in enabling graph machine learning for neuroimaging. However, current practices often rely on rigid pipelines that overlook critical data-centric choices in how brain graphs are constructed. In this work, we adopt a Data-Centric AI perspective and systematically define and benchmark a data-centric design space for brain graph construction, constrasting with primarily model-centric prior w...
ID: 2508.12533v1 cs.LG, cs.AI, q-bio.NC
Авторы:

Kazuki Irie, Samuel J. Gershman

## Контекст Область исследования, охватывающая искусственные нейронные сети (АНС), сфокусирована на развитии моделей, эффективных для решения задач машинного обучения, в том числе языкового моделирования. Несмотря на успехы, существуют проблемы, такие как ограниченная способность моделей внимательно относиться к последним данным и неэффективность в памяти. Задача программирования синаптических весов (fast weights) возникла как попытка решить эти проблемы, предлагая модели, которые могут адаптироваться динамически к входным данным. Эти модели, известные как Fast Weight Programmers (FWPs), ориентированы на моделирование синаптической пластичности в мозгу, что делает их полезными как для машинного обучения, так и для понимания принципов работы мозга. ## Метод FWPs — это вид Рекуррентных Нейронных Сетей (RNN), в которых синаптические веса (fast weights) меняются динамически в зависимости от входных данных. Эти веса служат для краткосрочного хранения информации и контролируются другой сетью (программистом), которая обучается с помощью градиентного спуска. Метод заключается в использовании матричной формы синаптических весов, что позволяет эффективно обрабатывать последовательные данные. Архитектура модели включает в себя необходимые узлы для вычисления и обновления весов, а также сеть-программировальный модуль, контролирующий эти изменения. Эта модель требует оптимизации как для сети-программировального модуля, так и для самой FWPs. ## Результаты Эксперименты проводились на различных задачах языкового моделирования, включая задачи с текстовыми данными. Данные были разбиты на подвыборки для обучения и тестирования. Результаты показали, что модель FWPs может эффективно обрабатывать данные, адаптируясь к изменениям в последовательностях и показывая высокую точность в решении задач. Улучшения относились к обнаружению контекста в данных и уменьшению времени обучения по сравнению с традиционными моделями RNN. ## Значимость FWPs имеют широкие применения в машинном обучении, в том числе в моделировании языка, классификации и анализе последовательных данных. Одним из основных преимуществ является их возможность эффективного обращения с динамическими данными, что обеспечивает более гибкую и точную модель. Также, их подход к программированию синаптических весов может быть применен в нейробиологии для изучения синаптической пластичности в мозгу, подчеркивая естественное соответствие между искусственным и натуральным интеллектом. ## Выводы FWPs представляют собой прорыв в области моделей RNN, предоставляя мощные инструменты для решения задач машинного обучения и динамического анализа последовательных данных. Бу
Annotation:
Recent advances in artificial neural networks for machine learning, and language modeling in particular, have established a family of recurrent neural network (RNN) architectures that, unlike conventional RNNs with vector-form hidden states, use two-dimensional (2D) matrix-form hidden states. Such 2D-state RNNs, known as Fast Weight Programmers (FWPs), can be interpreted as a neural network whose synaptic weights (called fast weights) dynamically change over time as a function of input observati...
ID: 2508.08435v1 cs.LG, cs.AI, q-bio.NC