📊 Статистика дайджестов
Всего дайджестов: 34123 Добавлено сегодня: 101
Последнее обновление: сегодня
Авторы:
Ziyu Lu, Anna J. Li, Alexander E. Ladd, Pascha Matveev, Aditya Deole, Eric Shea-Brown, J. Nathan Kutz, Nicholas A. Steinmetz
Саммари на русском не найдено
Доступные поля: ['id', 'arxiv_id', 'title', 'authors', 'abstract', 'summary_ru', 'categories', 'published_date', 'created_at']
Доступные поля: ['id', 'arxiv_id', 'title', 'authors', 'abstract', 'summary_ru', 'categories', 'published_date', 'created_at']
Annotation:
Neural activity forecasting is central to understanding neural systems and
enabling closed-loop control. While deep learning has recently advanced the
state-of-the-art in the time series forecasting literature, its application to
neural activity forecasting remains limited. To bridge this gap, we
systematically evaluated eight probabilistic deep learning models, including
two foundation models, that have demonstrated strong performance on general
forecasting benchmarks. We compared them against ...
Авторы:
Han-Lin Hsieh, Maryam M. Shanechi
## Контекст
Уменьшение размерности является критическим аспектом различных научных областей, в том числе нейронаук. Одним из значимых подходов является **Пробабилистический Геометрический Анализ Главных Компонент (PGPCA)**. Это метод, который расширяет **Пробабилистический Анализ Главных Компонент (PPCA)**, учитывая геометрию нелинейных многообразий, на которых распределены данные.
Обычное **PPCA** основывается на линейных моделях и ограничено работой в евклидовом пространстве. Однако многие данные, особенно в нейронауке, имеют нетривиальную геометрию, лежащую на нетривиальных многообразиях. Это приводит к несоответствию между данными и моделью. **PGPCA** решает эту проблему, используя геометрические представления многообразий для описания и уменьшения размерности данных, находящихся на них.
## Метод
**PGPCA** создан на основе **PPCA**, но включает в себя геометрическую модель многообразия. Данный метод позволяет построить не только линейную модель размерности, но также выделять геометрические параметры многообразия, на которых распределены данные.
Главная идея заключается в том, что вместо того, чтобы рассматривать точки в евклидовом пространстве, **PGPCA** предлагает моделировать данные в геометрической системе координат многообразия. Это позволяет учитывать нетривиальные девиации от линейных моделей и шумы, связанные с нелинейной геометрией многообразия.
В ходе работы метода происходит построение модели, основанной на эмпирических данных, и оценка параметров многообразия и шума. Этот подход позволяет не только уменьшить размерность, но и понять, насколько геометрическое представление данных более точно описывает данные, чем линейная модель.
## Результаты
**PGPCA** протестирован на симуляционных данных и данных, полученных из мозга. Он показал значительные улучшения по сравнению с **PPCA** в ситуациях, когда данные распределены нелинейным образом.
Одним из ключевых результатов является возможность сравнения разных моделей геометрии. **PGPCA** может определить, является ли геометрия многообразия более точной моделью для данных, чем евклидовый пространственный подход.
Помимо этого, **PGPCA** позволяет проводить размерностный анализ данных, которые распределены как на многообразии, так и в его окрестностях, что делает этот подход применимым для широкого круга задач в нейронауке.
## Значимость
**PGPCA** может применяться в различных дисциплинах, где данные имеют геометрическое распределение нелинейного характера. Особенно он полезен в нейронауке, где нелинейная геометрия многообразий часто о
Annotation:
Dimensionality reduction is critical across various domains of science
including neuroscience. Probabilistic Principal Component Analysis (PPCA) is a
prominent dimensionality reduction method that provides a probabilistic
approach unlike the deterministic approach of PCA and serves as a connection
between PCA and Factor Analysis (FA). Despite their power, PPCA and its
extensions are mainly based on linear models and can only describe the data in
a Euclidean coordinate system. However, in many ne...
Авторы:
Alex Nguyen, David J. Schwab, Vudtiwat Ngampruetikorn
#################################
## Контекст
#################################
В нынешней практике машинного обучения часто используются процедуры, называемые "дата-прунинг" и "дата-аугментация", которые позволяют улучшить общую устойчивость моделей. Однако эти методы основываются на целенаправленном удалении или модификации данных, что, по определению, приводит к утере информации. Эта странность привлекла внимание исследователей, поскольку логично предположить, что удаление данных или сужение их объема может привести к ухудшению качества модели. Тем не менее, на практике неоднократно наблюдается улучшение результатов. Одним из примеров такого поведения является данная статья, которая исследует возможность улучшения моделей машинного обучения с помощью "дата-коарсе-грейдинга" — способа сужения данных, основанного на их релевантности к целевой задаче.
#################################
## Метод
#################################
Авторы используют модель, основанную на задаче высокомерной линейной регрессии с регуляризацией риджем. Исходные данные были подвергнуты "коарсе-грейдингу", то есть систематическим удалению менее важных признаков, определяемых их вкладом в модель. Они использовали принципы из теории статистической физики, а именно, методы "ренормализационной группы" (renormalization group), чтобы систематизировать процесс отбора признаков. Оптимальная регуляризация, использованная в исследовании, позволила авторам анализировать характеристики данных и их влияние на модель, включая влияние коарсе-грейдинга на риск предсказания.
#################################
## Результаты
#################################
Изучение результатов показало, что некоторые схемы коарсе-грейдинга могут улучшить прогностическую способность модели. Например, "high-pass" схема, которая убирает менее релевантные, но менее влиятельные признаки, может улучшить общую точность. Тем не менее, "low-pass" схема, которая удаляет более важные признаки, приводит к ухудшению модели. Эти результаты были получены с помощью регуляризации, при помощи которой авторы могли оптимизировать процесс удаления данных. Это позволило исследователям объяснить, почему "дата-аугментация" может улучшать модели — она фокусируется на самых важных признаках, исключая менее полезные.
#################################
## Значимость
#################################
Результаты статьи имеют значительные последствия для области машинного обучения. Они показывают, что удаление менее важных признаков может улучшить модель, но только при оптимальной регуляризации. Этот подход может быть применен в ситуациях, когда данные имеют огромные объемы, но не все признаки оказывают влияние на результат. Также значимость исследования заключается в том, что оно продемонстрировало, как физические принципы, такие как "ренорма
Annotation:
Lossy data transformations by definition lose information. Yet, in modern
machine learning, methods like data pruning and lossy data augmentation can
help improve generalization performance. We study this paradox using a solvable
model of high-dimensional, ridge-regularized linear regression under 'data
coarse graining.' Inspired by the renormalization group in statistical physics,
we analyze coarse-graining schemes that systematically discard features based
on their relevance to the learning ta...
Авторы:
Patrick Madlindl, Fabian Bongratz, Christian Wachinger
## Контекст
Корональная поверхностная реконструкция (Cortical Surface Reconstruction, CSR) — основной процесс в нейроимагологии, обеспечивающий морфологический анализ риносорбента и жизнедеятельность мозга. Недавние прогрессы в области обучаемой CSR существенно ускорили этот процесс, позволив выполнять реконструкцию в течение нескольких секунд, используя деформацию шаблонных анатомических моделей. Однако недостаток в этой области заключается в необходимости обеспечивать оптимальность деформационных процессов, оптимизированных по энергии, и поддерживать консистентность результатов при различных условиях обучения. Мы разработали новую методику, названную Minimal Energy Deformation (MED), которая улучшает обучаемость, сохраняя при этом топологическую корректность и реконструкционную точность.
## Метод
Мы используем шаблонный подход к CSR, включающий глубокие нейронные сети для уравнения движения. Целью является регулирование деформационного процесса, используя новую функцию потерь Minimal Energy Deformation (MED), которая добавляет регуляризацию к деформационным путям. MED-функция оптимизируется вместе с Chamfer Distance, чтобы повысить устойчивость обучения и сохранить топологическую корректность в результате. Мы внедрили эту методику в реконструкционный классификатор V2C-Flow, чтобы продемонстрировать повышение стабильности и точности в реконструкции корональных поверхностей.
## Результаты
Мы проводили эксперименты на различных наборах данных нейроимагов, включая Т1- и Т2-сканы. Наши результаты показывают, что внедрение MED-функции приводит к существенному улучшению консистентности и воспроизводимости результатов реконструкции. Мы сравнивали наши результаты с другими моделями и показали, что они превосходят их в топологической корректности и энергетической оптимальности. Мы также проверили топологическую корректность на тестовых данных, подтвердив, что наш подход обеспечивает топологически верные реконструкции во всех случаях.
## Значимость
Наш подход может быть применен в различных областях, включая морфологический анализ, диагностику заболеваний и функциональное исследование мозга. Он предлагает существенные преимущества по сравнению с существующими моделями, такими как улучшенная консистентность результатов и уменьшение возможности для случайных выбросов. Мы предлагаем, что наша работа может повлиять на развитие нейроимагологии, позволяя повысить точность и надежность CSR в широком круге задач.
## Выводы
Мы разработали новую методику реконструкции корональных поверхностей с минимальной энергией деформации, которая может быть интегрирована с имеющимися моделями, такими как
Annotation:
Cortical surface reconstruction (CSR) from magnetic resonance imaging (MRI)
is fundamental to neuroimage analysis, enabling morphological studies of the
cerebral cortex and functional brain mapping. Recent advances in learning-based
CSR have dramatically accelerated processing, allowing for reconstructions
through the deformation of anatomical templates within seconds. However,
ensuring the learned deformations are optimal in terms of deformation energy
and consistent across training runs remain...