Dynamical Modeling of Behaviorally Relevant Spatiotemporal Patterns in Neural Imaging Data
2509.18507v1
q-bio.NC, cs.AI, cs.CV, cs.LG
2025-09-25
Авторы:
Mohammad Hosseini, Maryam M. Shanechi
Резюме на русском
Исходные данные:
Название: Dynamical Modeling of Behaviorally Relevant Spatiotemporal Patterns in Neural Imaging Data
Авторы: Mohammad Hosseini, Maryam M. Shanechi
## Контекст
Область исследования связана с использованием high-dimensional imaging neural activity, таких как widefield calcium и functional ultrasound imaging, для понимания связи между brain activity и behavior. Эти методы обеспечивают богатую информацию о brain dynamics, но их моделирование сложно ввиду высокой размерности, сложных spatiotemporal dependencies и проявления behaviorally irrelevant dynamics. Некоторые существующие методы применяют пре-processing для получения low-dimensionalных representations, но это может привести к искажению или утере behaviorally relevant information. Моделирование neural dynamics в этой области является ключевым для понимания связи между brain activity и behavior, но существующие модели недостаточно эффективны в этих задачах.
## Метод
Мы предлагаем SBIND (Spatio-Temporal Dynamics Modeling with Behaviorally Relevant Disentangling) — новую data-driven deep learning фреймворк для modeling spatiotemporal dependencies в neural images. Фреймворк SBIND имеет две основные функциональные части:
1. **Modeling spatiotemporal dependencies**: SBIND использует deep learning модели для выявления local и long-range spatiotemporal dependencies в neural images.
2. **Behaviorally relevant disentangling**: Модель выделяет и dissocciates behaviorally relevant dynamics из других neural dynamics.
Мы описываем архитектуру SBIND и ее применение к widefield imaging datasets. Также мы расширяем SBIND для functional ultrasound imaging, которая широко используется в recent studies.
## Результаты
Мы проводили эксперименты с widefield imaging datasets, включая datasets с behavioral experiments. Мы сравниваем SBIND с existing models, такими как PCA-based approaches и traditional dynamical models. Результаты показали, что SBIND вышедшее отлично model local и long-range spatiotemporal dependencies в neural images. Более того, SBIND эффективно dissociates behaviorally relevant dynamics, что приводит к значительному улучшению в neural-behavioral prediction. Мы также проводили эксперименты с functional ultrasound imaging и показали, что SBIND может эффективно работать с этой модностью, которая прежде была практически не исследована.
## Значимость
SBIND может применяться в разных областях, таких как neuroscience, neuromodulation и neurorobotics. Он предоставляет эффективный инструмент для моделирования и анализа neural dynamics, обеспечивая новые возможности для понимания neural mechanisms underlying behavior. Основное преимущество SBIND заключается в том, что он может диссентировать behaviorally relevant dynamics из сложных spatiotemporal dependencies, что достигается без необходимости предварительного preprocessing.
## Выводы
Мы представили SBIND — новую deep learning фреймворк для modeling spatiotemporal dependencies в neural images. Наши результаты показали, что SBIND может эффективно model local и long-range spatiotemporal dependencies, dissociate behaviorally relevant dynamics и выдавать лучшие результаты в neural-behavioral prediction. Будущие исследования будут направлены на улучшение модели, ее распространение на другие imaging modalities и углубление понимания связи между neural activity и behavior.
Abstract
High-dimensional imaging of neural activity, such as widefield calcium and
functional ultrasound imaging, provide a rich source of information for
understanding the relationship between brain activity and behavior. Accurately
modeling neural dynamics in these modalities is crucial for understanding this
relationship but is hindered by the high-dimensionality, complex spatiotemporal
dependencies, and prevalent behaviorally irrelevant dynamics in these
modalities. Existing dynamical models often employ preprocessing steps to
obtain low-dimensional representations from neural image modalities. However,
this process can discard behaviorally relevant information and miss
spatiotemporal structure. We propose SBIND, a novel data-driven deep learning
framework to model spatiotemporal dependencies in neural images and disentangle
their behaviorally relevant dynamics from other neural dynamics. We validate
SBIND on widefield imaging datasets, and show its extension to functional
ultrasound imaging, a recent modality whose dynamical modeling has largely
remained unexplored. We find that our model effectively identifies both local
and long-range spatial dependencies across the brain while also dissociating
behaviorally relevant neural dynamics. Doing so, SBIND outperforms existing
models in neural-behavioral prediction. Overall, SBIND provides a versatile
tool for investigating the neural mechanisms underlying behavior using imaging
modalities.