#### Контекст Голосая система человека характеризуется высокой топографической организацией. В ранних уровнях аудиопроцессинга происходит кластеризация нейронов с похожими ответными свойствами, образуя плавные карты для акустических признаков, таких как частота. В более высоких уровнях обработки сигнала образуются модулярные регионы, которые отвечают за селективность к музыке и речи. Несмотря на эту организацию, подходы к оценке вычислительных моделей аудиоперцепции не проверяют наличие топографической структуры. Целью данного исследования является разработка моделей, которые бы не только различали аудиофоны, но и воспроизводили топографическую организацию, которая характерна для человеческой системы зрения. #### Метод Мы предлагаем новую классификационную модель, TopoAudio, основанную на концепции "волоконной сети" для визуального перцептива, примененной к аудиопроцессингу. Модель обучается классифицировать звуковые фоны (speech и environmental sounds) на основе коэхлеграмм. Для воспроизведения топографической структуры включена дополнительная ограничениевость сети на то, чтобы ближайшие узлы на двумерной мозаичной сетке развивали похожие ответы на свойства звука. Эта конструкция позволяет модели стабильно выполнять входные данные и в то же время строить топографические карты, похожие на топографию человеческой аудиории. #### Результаты Мы провели эксперименты с TopoAudio, сравнивая ее с двумя ведущими нетопографическими моделями. Модель TopoAudio демонстрирует почти одинаковую точность классификации, при этом включая топографические карты, похожие на человеческий мозг. Мы использовали данные от fMRI для оценки того, насколько модель может воспроизвести естественную топографию. В результате, TopoAudio совпадает с точностью нетопографических моделей, но в своих картах представляет более точную изображение топографии человеческой аудиории, включая зоны ответа на звуковую частоту и амплитуду. #### Значимость Модель TopoAudio является первой биологически обоснованной моделью, которая воспроизводит топографическую структуру звукообработки в человеческой аудиории на энд-то-энд уровне. Такая модель может применяться в области робототехники, для создания более биологично организованных систем перцепции. Кроме того, она показывает, что ограничение на длину волокон может быть эффективным инструментом для воспроизведения биологических структур в вычислительных моделях. #### Выводы Наша модель TopoAudio продемонстрировала, что моделирование топографической организации может быть реализовано в классификацио

Исходные данные: Название: Dynamical Modeling of Behaviorally Relevant Spatiotemporal Patterns in Neural Imaging Data Авторы: Mohammad Hosseini, Maryam M. Shanechi ## Контекст Область исследования связана с использованием high-dimensional imaging neural activity, таких как widefield calcium и functional ultrasound imaging, для понимания связи между brain activity и behavior. Эти методы обеспечивают богатую информацию о brain dynamics, но их моделирование сложно ввиду высокой размерности, сложных spatiotemporal dependencies и проявления behaviorally irrelevant dynamics. Некоторые существующие методы применяют пре-processing для получения low-dimensionalных representations, но это может привести к искажению или утере behaviorally relevant information. Моделирование neural dynamics в этой области является ключевым для понимания связи между brain activity и behavior, но существующие модели недостаточно эффективны в этих задачах. ## Метод Мы предлагаем SBIND (Spatio-Temporal Dynamics Modeling with Behaviorally Relevant Disentangling) — новую data-driven deep learning фреймворк для modeling spatiotemporal dependencies в neural images. Фреймворк SBIND имеет две основные функциональные части: 1. **Modeling spatiotemporal dependencies**: SBIND использует deep learning модели для выявления local и long-range spatiotemporal dependencies в neural images. 2. **Behaviorally relevant disentangling**: Модель выделяет и dissocciates behaviorally relevant dynamics из других neural dynamics. Мы описываем архитектуру SBIND и ее применение к widefield imaging datasets. Также мы расширяем SBIND для functional ultrasound imaging, которая широко используется в recent studies. ## Результаты Мы проводили эксперименты с widefield imaging datasets, включая datasets с behavioral experiments. Мы сравниваем SBIND с existing models, такими как PCA-based approaches и traditional dynamical models. Результаты показали, что SBIND вышедшее отлично model local и long-range spatiotemporal dependencies в neural images. Более того, SBIND эффективно dissociates behaviorally relevant dynamics, что приводит к значительному улучшению в neural-behavioral prediction. Мы также проводили эксперименты с functional ultrasound imaging и показали, что SBIND может эффективно работать с этой модностью, которая прежде была практически не исследована. ## Значимость SBIND может применяться в разных областях, таких как neuroscience, neuromodulation и neurorobotics. Он предоставляет эффективный инструмент для моделирования и анализа neural dynamics, обеспечивая новые возможности для понимания neural mechanisms underlying behavior. Основное преимущество SBIND заключается в том, что он может диссентировать behaviorally relevant dynamics из сложных spatiotemporal dependencies, что достигается без необходимости предварительного preprocessing. ## Выводы Мы представили SBIND — новую deep learning фреймворк для modeling spatiotemporal dependencies в neural images. Наши результаты показали, что SBIND может эффективно model local и long-range spatiotemporal dependencies, dissociate behaviorally relevant dynamics и выдавать лучшие результаты в neural-behavioral prediction. Будущие исследования будут направлены на улучшение модели, ее распространение на другие imaging modalities и углубление понимания связи между neural activity и behavior.

## Контекст Современные Сверточные Нейронные Сети (СНС), такие как ResNet, опираются на принципы функционирования визуальной системы млекопитающих. Они эмулируют афферентные связи (от ретины и LGN к визуальному кортексу) и долгорадийные проекции (между различными визуальными кортикальными областями). Однако, в биологической системе, существуют внутрикортикальные связи, называемые латеральными (или горизонтальными), которые имитируют связи внутри feature maps CNN. Эти связи значительно влияют на обработку визуальной информации в мозгу и их отсутствие в традиционных CNN-моделях ограничивает их биологическую аналогичность и эффективность. Мы исследуем, как моделировать эти связи в рамках стандартных CNN, обосновывая их потенциальное влияние на моделирование визуального распознавания. ## Метод Мы предлагаем модификацию стандартной CNN-архитектуры, включающую внутрислоевые латеральные связи. Используя весовую связность для рекуррентных активаций, мы эмулируем латеральные связи, аналогичные биологической системе. Для того чтобы отделить эксцитаторные и ингибиторные связи, мы предлагаем настраиваемую функцию потерь. Эти модификации позволяют создать модель, поддерживающую биологические принципы визуальной обработки. Мы проверили эффективность нашего подхода на задаче классификации изображений, анализировав качество распознавания и биологичность моделирования. ## Результаты Мы провели эксперименты с использованием объемных данных классификации (например, CIFAR-10 или ImageNet). Наша модифицированная CNN-модель показала улучшенную точность классификации по сравнению с оригинальными моделями без латеральных связей. Мы также проанализировали свойства активаций и типы связей внутри модели. Было показано, что рекуррентные активации и отделение эксцитаторных и ингибиторных связей приводят к более биологичному распределению весов и повышенной стабильности модели. ## Значимость Наш подход может быть применен во всех областях, где используются CNN, включая распознавание изображений, обработку сигналов и медицинский анализ изображений. Он позволяет не только повысить точность распознавания, но и сделать модели более биологично соответствующими, что может способствовать лучшему пониманию принципов визуальной обработки в мозге. Этот подход может стать важной основой для создания более эффективных и биологично природных моделей машинного обучения. ## Выводы Мы успешно доказали, что добавление латеральных связей в CNN модели приводит к улучшению их качества и биологично

#### Контекст Анализ нервной системы и головного мозга требует эффективных методов для создания более точных и функционально когерентных биологических атласов. Одной из основных проблем является ограниченная гибкость и резолюция существующих атласов, которые часто определяются заранее и имеют групповой характер. Эти ограничения влияют на точность интерпретируемости данных и их приложений в клинической практике. Необходима методика, которая могла бы генерировать индивидуальные, высокорезольвентные биологические атласы с функциональной когерентностью и поисковыми возможностями. #### Метод Для решения этих задач предлагается рамочная методика под названием **Deep Cluster Atlas (DCA)**, которая объединяет предварительно обученный автокодировщик и спатиально регулируемую глубокую кластеризацию. Автокодировщик позволяет получать низкомерные представления данных, тогда как спатиально регулируемая кластеризация обеспечивает функциональную когерентность и пространственную связность регионов. Метод позволяет управлять уровнем резолюции и анатомическим объемом, а также легко адаптируется к различным структурам головного мозга. Это делает DCA гибким и производительным инструментом для создания биологических атласов. #### Результаты Для оценки эффективности DCA проводились эксперименты с использованием нескольких больших наборов данных fMRI. Метод показал существенное улучшение в функциональной когерентности и silhouette-коэффициенте по сравнению с текущими лучшими решениями, повысив их на 98.8% и 29% соответственно. Были проведены дополнительные эксперименты, в которых DCA демонстрировал превосходную производительность в задачах, таких как диагностика аутизма и декодирование умственных процессов. Эти результаты подтверждают мощность DCA в создании точных и функционально значимых биологических атласов. #### Значимость Результаты DCA открывают новые возможности для широкого круга клинических и научных приложений. Индивидуальные атласы могут быть использованы для более точного диагностирования и лечения различных психических и нейродегенеративных заболеваний. Благодаря своей гибкости, DCA может применяться для исследований в разных областях, включая развитие биологических атласов для нестандартных анатомических структур. Это делает DCA важной компонентой в будущих исследованиях по здравоохранению и биологической аналитике. #### Выводы DCA доказала свою высокую эффективность в создании индивидуальных, функционально когерентных и резолюционно высоких биологических атласов. Этот подход представляет собой значительный шаг в

## Контекст Неврологические условия, влияющие на визуальное восприятие, создают существенные разрывы во взаимодействии между пострадавшими и своими близкими, семьями и медицинскими кадрами. Эти различия часто приводят к недопониманию и неэффективности в лечении. Недостаток систематического подхода к моделированию таких ситуаций с ограниченными возможностями для оценки достигнутого реализма ставит перед наукой задачу создания более точных и клинически значимых моделей. ## Метод Мы предлагаем Perceptual Reality Transformer (PRT) — рамформу, включающую шесть различных нейронных сетей, способных работать вместе для реализации 8 неологических перцептивных условий. Мы использовали визуальные преобразования, основанные на клинических данных, для моделирования условий, таких как синдром Симуань-Баренблата (simultanagnosia), просопагнозия (prosopagnosia), аддитивные дефициты внимания (ADHD), агнозия визуальная (visual agnosia), депрессивные изменения восприятия (depression-related changes), туннельное видение (anxiety tunnel vision) и алцгеймерская эффект (Alzheimer's memory effects). Используя Vision Transformer (ViT) и другие архитектуры, мы достигли оптимальных результатов в двух разных базе данных — ImageNet и CIFAR-10. ## Результаты Мы провели систематическую оценку PRT с помощью сравнения с традиционными CNN-архитектурами и генеративными моделями. PRT показал значительное превосходство в точности и реализме воспроизведения условий восприятия. Наша работа приводит к систематическому бенчмарку для моделирования перцептивных условий, включая условия, которые ранее не были адекватно моделированы. Мы также представили уникальные конкретные функции пертурбации (perturbation functions), которые были разработаны на основе клинических данных. ## Значимость Помимо применения в области медицинского образования и эмпатии, PRT может использоваться в сфере создания приспособленных технологий для людей с неологическими расстройствами. Это открывает путь к развитию более глубокого понимания того, как нейронные сети могут моделировать сложные человеческие перцептивные состояния. ## Выводы PRT достигает значительных успехов в моделировании неологических перцептивных условий с помощью нейронных сетей. Наши результаты устанавливают новые стандарты для бенчмаркинга и моделирования таких условий. Будущие исследования будут фокусироваться на усовершенствовании моделей и расширении перспектив применения в клинической практике и создании системы помощи для людей с неологическими расстройствами.