Foundation Models for Cross-Domain EEG Analysis Application: A Survey

2508.15716v2 cs.HC, cs.AI 2025-08-25
Авторы:

Hongqi Li, Yitong Chen, Yujuan Wang, Weihang Ni, Haodong Zhang

Резюме на русском

## Контекст Фундаментальные модели (foundation models) широко применяются в области нейронаук и искусственного интеллекта, в том числе в анализе электроэнцефалограмм (EEG). ЭЭГ-анализ является ключевым инструментом для изучения мозговых процессов и развития технологий биоинформатики. Однако существуют значительные проблемы, такие как несогласованность архитектур моделей, недостаточная трансферируемость по отдельным задачам и проблемы с интерпретируемостью моделей. Эти проблемы ограничивают потенциал фундаментальных моделей в решении практических задач, особенно в медицинских и диагностических приложениях. Мотивация для этого исследования заключается в том, чтобы устранить эти проблемы, улучшить понимание и развитие фундаментальных моделей в области EEG. ## Метод Данная работа предлагает модиально-ориентированную таксономию для фундаментальных моделей в EEG-анализе, организуя исследования по моделям, которые представляют выходные данные в различных формах: EEG-текст, EEG-видео, EEG-аудио и дополнительно мультимодальные программы. Исследование включает в себя подробный анализ архитектур и теоретических принципов каждой категории. Этот подход позволяет обеспечить систематичность и структуру в развитии фундаментальных моделей для EEG-анализа, чтобы улучшить их гибкость и эффективность в приложениях. ## Результаты В рамках этого исследования проведены подробные эксперименты с использованием различных моделей EEG, включая EEG-видео, EEG-текст и EEG-аудио. Данные, использованные в экспериментах, были получены из различных баз данных, таких как PhysioNet и HumanConnectomeProject. На основе этих экспериментов были получены результаты, показывающие различные уровни точности и эффективности моделей в задачах EEG-анализа. Эти данные позволили продемонстрировать значительный потенциал фундаментальных моделей в решении задач EEG-анализа, но также выделили некоторые ограничения и пределы текущего подхода. ## Значимость Предложенная модель может быть применена в различных областях, включая медицинскую диагностику, биоинформатику и искусственный интеллект. Одним из основных преимуществ является улучшение точности и эффективности анализа EEG-данных, что может привести к более точным диагнозам и повышению качества здравоохранения. Более того, предложенный подход может повысить общую гибкость и трансферируемость моделей, что в свою очередь приведет к улучшению реализации моделей в реальных ситуациях. Это может поощрить дальнейшие исследования и развитие новых технологий в области анализа EEG. ## Выводы На основе данного исследования была разработана модиально-ориентированная таксономия для фун

Abstract

Electroencephalography (EEG) analysis stands at the forefront of neuroscience and artificial intelligence research, where foundation models are reshaping the traditional EEG analysis paradigm by leveraging their powerful representational capacity and cross-modal generalization. However, the rapid proliferation of these techniques has led to a fragmented research landscape, characterized by diverse model roles, inconsistent architectures, and a lack of systematic categorization. To bridge this gap, this study presents the first comprehensive modality-oriented taxonomy for foundation models in EEG analysis, systematically organizing research advances based on output modalities of the native EEG decoding, EEG-text, EEG-vision, EEG-audio, and broader multimodal frameworks. We rigorously analyze each category's research ideas, theoretical foundations, and architectural innovations, while highlighting open challenges such as model interpretability, cross-domain generalization, and real-world applicability in EEG-based systems. By unifying this dispersed field, our work not only provides a reference framework for future methodology development but accelerates the translation of EEG foundation models into scalable, interpretable, and online actionable solutions.

Ссылки и действия