Dynamical Modeling of Behaviorally Relevant Spatiotemporal Patterns in Neural Imaging Data

2509.18507v1 q-bio.NC, cs.AI, cs.CV, cs.LG 2025-09-25
Авторы:

Mohammad Hosseini, Maryam M. Shanechi

Резюме на русском

Исходные данные: Название: Dynamical Modeling of Behaviorally Relevant Spatiotemporal Patterns in Neural Imaging Data Авторы: Mohammad Hosseini, Maryam M. Shanechi ## Контекст Область исследования связана с использованием high-dimensional imaging neural activity, таких как widefield calcium и functional ultrasound imaging, для понимания связи между brain activity и behavior. Эти методы обеспечивают богатую информацию о brain dynamics, но их моделирование сложно ввиду высокой размерности, сложных spatiotemporal dependencies и проявления behaviorally irrelevant dynamics. Некоторые существующие методы применяют пре-processing для получения low-dimensionalных representations, но это может привести к искажению или утере behaviorally relevant information. Моделирование neural dynamics в этой области является ключевым для понимания связи между brain activity и behavior, но существующие модели недостаточно эффективны в этих задачах. ## Метод Мы предлагаем SBIND (Spatio-Temporal Dynamics Modeling with Behaviorally Relevant Disentangling) — новую data-driven deep learning фреймворк для modeling spatiotemporal dependencies в neural images. Фреймворк SBIND имеет две основные функциональные части: 1. **Modeling spatiotemporal dependencies**: SBIND использует deep learning модели для выявления local и long-range spatiotemporal dependencies в neural images. 2. **Behaviorally relevant disentangling**: Модель выделяет и dissocciates behaviorally relevant dynamics из других neural dynamics. Мы описываем архитектуру SBIND и ее применение к widefield imaging datasets. Также мы расширяем SBIND для functional ultrasound imaging, которая широко используется в recent studies. ## Результаты Мы проводили эксперименты с widefield imaging datasets, включая datasets с behavioral experiments. Мы сравниваем SBIND с existing models, такими как PCA-based approaches и traditional dynamical models. Результаты показали, что SBIND вышедшее отлично model local и long-range spatiotemporal dependencies в neural images. Более того, SBIND эффективно dissociates behaviorally relevant dynamics, что приводит к значительному улучшению в neural-behavioral prediction. Мы также проводили эксперименты с functional ultrasound imaging и показали, что SBIND может эффективно работать с этой модностью, которая прежде была практически не исследована. ## Значимость SBIND может применяться в разных областях, таких как neuroscience, neuromodulation и neurorobotics. Он предоставляет эффективный инструмент для моделирования и анализа neural dynamics, обеспечивая новые возможности для понимания neural mechanisms underlying behavior. Основное преимущество SBIND заключается в том, что он может диссентировать behaviorally relevant dynamics из сложных spatiotemporal dependencies, что достигается без необходимости предварительного preprocessing. ## Выводы Мы представили SBIND — новую deep learning фреймворк для modeling spatiotemporal dependencies в neural images. Наши результаты показали, что SBIND может эффективно model local и long-range spatiotemporal dependencies, dissociate behaviorally relevant dynamics и выдавать лучшие результаты в neural-behavioral prediction. Будущие исследования будут направлены на улучшение модели, ее распространение на другие imaging modalities и углубление понимания связи между neural activity и behavior.

Abstract

High-dimensional imaging of neural activity, such as widefield calcium and functional ultrasound imaging, provide a rich source of information for understanding the relationship between brain activity and behavior. Accurately modeling neural dynamics in these modalities is crucial for understanding this relationship but is hindered by the high-dimensionality, complex spatiotemporal dependencies, and prevalent behaviorally irrelevant dynamics in these modalities. Existing dynamical models often employ preprocessing steps to obtain low-dimensional representations from neural image modalities. However, this process can discard behaviorally relevant information and miss spatiotemporal structure. We propose SBIND, a novel data-driven deep learning framework to model spatiotemporal dependencies in neural images and disentangle their behaviorally relevant dynamics from other neural dynamics. We validate SBIND on widefield imaging datasets, and show its extension to functional ultrasound imaging, a recent modality whose dynamical modeling has largely remained unexplored. We find that our model effectively identifies both local and long-range spatial dependencies across the brain while also dissociating behaviorally relevant neural dynamics. Doing so, SBIND outperforms existing models in neural-behavioral prediction. Overall, SBIND provides a versatile tool for investigating the neural mechanisms underlying behavior using imaging modalities.

Ссылки и действия