## Контекст Установление точного подхода к моделированию взаимосвязи между визуальными стимулами и нейронными ответами, характерных для зрительного потока, является ключевым вопросом в области компьютерной нейронауки. Особенностью этого процесса является то, что одинаковые визуальные стимулы способствуют разным нейронным ответам в зависимости от контекста, субъекта и условий испытаний. Традиционные задачи синтеза сигналов fMRI часто стремятся описать это с помощью детерминированных функций, но их не могут полностью корректно охватить неоднородность и вариативность поведения биологических систем. На данный момент в этой области необходима более точная модель, которая могла бы синтезировать fMRI-сигналы с учетом вариативности, характерной для биологических систем. ## Метод Мы предлагаем SynBrain, новое генерирующее фреймворковое решение, которое адресует эти проблемы с помощью прогнозируемых методов, основанных на принципах вероятностного и биологически интерпретируемого подхода. Основные компоненты SynBrain: (i) BrainVAE - модель, которая представляет нейронные ответы в виде непрерывных вероятностных распределений, сохраняя функциональную консистентность с помощью ограничений, накладываемых визуальными семантическими конструктами; (ii) Semantic-to-Neural Mapper - целевая система, преобразующая визуальные семантические сигналы в нейронные ответы с помощью семантических проекций. Весь механизм работает на базе глубоких нейронных сетей и целей, которые имитируют биологические процессы. ## Результаты Мы провели эксперименты, которые использовали определенные данные, в том числе аудио- и видеоконтент, а также сигналы fMRI. Метод SynBrain демонстрирует повышенную точность в синтезе fMRI-сигналов в сравнении с состоянием искусства. Мы также проверили его способность адаптироваться к новым пользователям с минимальным количеством данных. Формированные сигналы были эффективны в улучшении декодирования fMRI-to-image, что демонстрирует способность SynBrain к вариативному описанию нервных ответов. Эти результаты свидетельствуют о том, что SynBrain может имитировать биологическую неоднородность и сохранять функциональную консистентность. ## Значимость Области применения SynBrain включают в себя области компьютерных наук, социальных наук и медицины. Этот подход может быть использован для моделирования нейронных раскладок в разных условиях, в том числе при выявлении заболеваний, связанных с биологическим недостатком. Особенно важно, что SynBrain может применяться для преобразования сигналов fMRI в изображения, что может повысить эффективность обработки данных в с

## Контекст Понимание того, как визуальные стимулы преобразуются в кровеносные ответы в мозгу, является важной проблемой в компьютерных науках и нейронауке. Этот процесс характеризуется биологической вариабельностью: одинаковые визуальные стимулы вызывают разные ответы в мозгу, зависящие от контекста, субъекта и ситуации. Традиционные методы, ориентированные на детерминированное моделирование, сталкиваются с трудностями, связанными с этим неопределенностью. Это снижает точность и предсказуемость моделей, ограничивая их применение в нейронаучных исследованиях. Моделирование этой нерегулярности в сочетании с функциональной согласованностью необходимо для более точного понимания нейробиологических механизмов. ## Метод Мы предлагаем SynBrain — новую программную структуру, основанную на принципах проблемы задачи обучения с учителем и генеративной моделирования. Основная идея заключается в том, чтобы представить нейронные ответы в виде продольных вероятностных распределений, что позволяет сохранить функциональную согласованность и представлять биологические вариации. Главные компоненты SynBrain: (i) **BrainVAE** — модель, представляющая нейронные ответы с помощью вероятностных профилей, что обеспечивает продольную вариативность. (ii) **Semantic-to-Neural Mapper** — слой, проецирующий визуальные семантические признаки на нейронный манифолд, что обеспечивает высокую точность воспроизведения ответов в fMRI. Эта архитектура объединяет в себе мощь продольного моделирования и интерпретируемость биологических процессов. ## Результаты Мы провели подробные эксперименты на обширных данных, включая fMRI сигналы и визуальные стимулы. Модель SynBrain показала превосходство над другими подходами в задачах визуально-ниронного отображения. Оценки были проведены по метрикам качества, таким как PSNR, SSIM и correlation coefficient. Модель отлично справляется с неопределенностью в данных и позволяет эффективно адаптироваться к новым субъектам с небольшим количеством данных. Мы также проанализировали возможность SynBrain для улучшения обратных задач, таких как fMRI-to-image decoding. Наши результаты подтверждают, что модель SynBrain не только точно воспроизводит ответы, но и выделяет биологически значимые шаблоны. ## Значимость Перспективы SynBrain касаются широкого спектра применений в нейронауке и разработке интеллектуальных систем. Модель может быть использована для создания более точных моделей нейронной деятельности, улучшения диагностики и терапии неврологических заболеваний. Благодаря способности SynBrain адаптироваться к новым субъектам с минимальным объемом данных, она оказывается важной для решения про

Надежная интерпретация нейроимаджинга с помощью депейпд-леарнинга требует достоверных методов объяснения (XAI). Однако существующие XAI-методы часто не проходят строгий валидации, что подрывает надежность их выводов. В первый раз был проведен крупномасштабный систематический анализ этих методов на ~45,000 структурных MRI, используя новую фреймворк для валидации XAI. Этот фреймворк создавал признаки с ясно определенным сигналом — от локализованных анатомических особенностей до клинических лезионов — без изменения входных изображений. Анализ показал, что два из наиболее популярных методов, GradCAM и LRP, систематически не отвечали на ожидания, а SmoothGrad, проще в принципе, показался более надежным. Эти находки указывают на необходимость доработки XAI-методов для нейроимаджинга, подтверждают необходимость переоценки предыдущих исследований и дают рекомендации для безопасного применения XAI в этой области.

Целевая проблема заключается в неэффективности существующих методов непрерывного обучения (continual learning) при применении к задачам несупервизированного многоинстанционного обучения (multiple instance learning, MIL), которое широко используется в диагностике болезней крови, например, в определении лейкозей. Наша работа предлагает первый метод непрерывного обучения, оптимизированный специфически для MIL. Метод основывается на репетиции выборок (rehearsal), при которой выбираются отдельные инстанции из различных «мешков» (bags) на основе инстанций-аутентификаторов (instance attention scores) и их расстояний от среднего вектора класса и «мешка». Это позволяет эффективно сохранить разнообразие данных в памяти. Мы проверили эффективность на реальных данных лейкомии за один месяц, сравнив с трех известных методами непрерывного обучения. Наши результаты показали, что предложенный подход значительно превосходит их в производительности, устанавливая новую стандартную практику для непрерывного обучения в MIL.