Fine-Tuning Large Language Models Using EEG Microstate Features for Mental Workload Assessment

2508.07283v1 cs.HC, cs.AI, eess.SP, q-bio.NC, 97R40, I.2 2025-08-13
Авторы:

Bujar Raufi

Резюме на русском

## Контекст В последние годы становится все яснее, что электроэнцефалограмма (EEG) представляет собой мощный инструмент для изучения динамики мозговой деятельности. Однако, несмотря на свои возможности, использование EEG в области обучения машин для оценки уровня нагрузки на мозг (cognitive load state) сталкивается с рядовыми проблемами. Одна из основных проблем заключается в том, что существующие модели часто не могут точно отличить между такими сигналами, как "Rest" (отдых) и "Load" (нагрузка). Это ограничивает потенциальные применения технологий в области здравоохранения, робототехники и интеллектуальных систем. Для улучшения точности оценки нагрузки на мозг определенные исследователи принимают во внимание взаимосвязь между EEG-сигналами и микростатусами мозга (microstates). Эти микростаты — это короткие, стабильные состояния мозговой активности, которые могут сигнализируть о разных уровнях когнитивных процессов. Изучение этой связи может помочь в создании более точных моделей для оценки уровня нагрузки на мозг. Несмотря на это, существующие подходы недостаточно эффективны или недостаточно гибки для решения этой проблемы. В данном исследовании предлагается использовать микростатусы EEG в качестве источника данных для тонкой настройки (fine-tuning) Больших Моделей Языка (LLMs), чтобы улучшить их возможности в дифференциации уровней когнитивной нагрузки. Этот подход имеет значительный потенциал для развития области классификации когнитивных состояний и интеллектуальных технологий в целом. ## Метод Для достижения поставленных целей была разработана систематическая методология, состоящая из четырех запланированных этапов. **Первый шаг** — сбор и предварительная обработка данных. Для экспериментов была использована подготовленная выборка EEG, которая уже была связана с определенными уровнями когнитивной нагрузки ("Rest" и "Load"). Эта выборка была пройдена тщательной обработкой для удаления шума и исключения неточных сигналов. **Второй шаг** — сегментация EEG-сигналов и восстановление микростатусов (EEG backfitting). Микростаты были определены и использованы для создания конкретных фичей, которые могут быть использованы во время процесса обучения модели. **Третий шаг** — выделение признаков и оптимизация предложений (prompt engineering). Извлеченные микростатусы были задействованы при формировании предложений, которые были представлены модели для обучения. Эти предложения были специально сконструированы для того, чтобы обеспечить наиболее точную классификацию уровней нагрузки. **Четвертый шаг** — выбор и тонкая настройка модели. Была проведена серия экспериментов с различными моделями Больши

Abstract

This study explores the intersection of electroencephalography (EEG) microstates and Large Language Models (LLMs) to enhance the assessment of cognitive load states. By utilizing EEG microstate features, the research aims to fine-tune LLMs for improved predictions of distinct cognitive states, specifically 'Rest' and 'Load'. The experimental design is delineated in four comprehensive stages: dataset collection and preprocessing, microstate segmentation and EEG backfitting, feature extraction paired with prompt engineering, and meticulous LLM model selection and refinement. Employing a supervised learning paradigm, the LLM is trained to identify cognitive load states based on EEG microstate features integrated into prompts, producing accurate discrimination of cognitive load. A curated dataset, linking EEG features to specified cognitive load conditions, underpins the experimental framework. The results indicate a significant improvement in model performance following the proposed fine-tuning, showcasing the potential of EEG-informed LLMs in cognitive neuroscience and cognitive AI applications. This approach not only contributes to the understanding of brain dynamics but also paves the way for advancements in machine learning techniques applicable to cognitive load and cognitive AI research.

Ссылки и действия