ASLSL: Adaptive shared latent structure learning with incomplete multi-modal physiological data for multi-dimensional emotional feature selection

2508.05934v1 cs.HC, cs.AI, cs.LG 2025-08-12
Авторы:

Xueyuan Xu, Tianze Yu, Wenjia Dong, Fulin Wei, Li Zhuo

Резюме на русском

## Контекст Улучшение эмоционального распознавания с использованием мультимодальных физиологических сигналов является актуальной проблемой в области компьютерных интерфейсов мозга. Тем не менее, эти сигналы часто являются высокомерночисленными и могут содержать нерелевантные, повторяющиеся и шумные представления. Такая неочищенная информация легко приводит к переобучению, повышению комплексности обработки и снижению качества распознавания эмоций. Особенно остро эта проблема проявляется при отсутствии данных в некоторых режимах измерений, что часто встречается в реальных условиях. Для решения этих задач развито многочисленное фильтрование признаков. Однако большинство существующих подходов предполагают полноту данных, что не соответствует реальной ситуации. Для улучшения эмоционального распознавания в условиях отсутствия данных необходимо разработать эффективные методы обучения и выделения признаков. ## Метод Метод **Adaptive Shared Latent Structure Learning (ASLSL)** предлагает инновационный подход к обработке неполных мультимодальных физиологических сигналов. Он основывается на предположении, что признаки, имеющие близкие эмоциональные метки, делятся общим скрытым пространством. Метод ASLSL использует адаптивную структуру обучения для извлечения этого общего пространства, что позволяет уменьшить влияние отсутствия данных и выделить наиболее значимые эмоциональные признаки. Данный подход эффективно компенсирует отсутствие или повреждение данных в отдельных модальностях, обеспечивая более точное и высококачественное распознавание эмоций. ## Результаты Авторы провестили эксперименты на двух популярных датасетах (DEAP и DREAMER), которые включают мультимодальные физиологические данные и многомерные метки эмоций. На них сравнивались результаты метода ASLSL с 17 других методов выделения признаков. Экспериментальные результаты показали, что ASLSL демонстрирует превосходство в точности классификации и эффективности в обработке неполных данных. Особенно заметны выигрыши при отсутствии данных в некоторых модальностях, где прочие методы часто снижают качество распознавания. ## Значимость Предложенный подход может быть применен в различных областях, включая компьютерные интерфейсы мозга, медицинскую диагностику и учет важных эмоциональных состояний в ИИ-системах. Он обеспечивает улучшенную точность распознавания эмоций, уменьшает шум и нерелевантную информацию, и значительно сокращает вычислительную сложность. Это делает метод ASLSL незаменимым для приложений, требующих высокого качества распознавания в неполных данных. ## Выводы Метод ASLSL демонстрирует высокую эф

Abstract

Recently, multi-modal physiological signals based emotion recognition has garnered increasing attention in the field of brain-computer interfaces. Nevertheness, the associated multi-modal physiological features are often high-dimensional and inevitably include irrelevant, redundant, and noisy representation, which can easily lead to overfitting, poor performance, and high computational complexity in emotion classifiers. Feature selection has been widely applied to address these challenges. However, previous studies generally assumed that multi-modal physiological data are complete, whereas in reality, the data are often incomplete due to the openness of the acquisition and operational environment. For example, a part of samples are available in several modalities but not in others. To address this issue, we propose a novel method for incomplete multi-modal physiological signal feature selection called adaptive shared latent structure learning (ASLSL). Based on the property that similar features share similar emotional labels, ASLSL employs adaptive shared latent structure learning to explore a common latent space shared for incomplete multi-modal physiological signals and multi-dimensional emotional labels, thereby mitigating the impact of missing information and mining consensus information. Two most popular multi-modal physiological emotion datasets (DEAP and DREAMER) with multi-dimensional emotional labels were utilized to compare the performance between compare ASLSL and seventeen feature selection methods. Comprehensive experimental results on these datasets demonstrate the effectiveness of ASLSL.

Ссылки и действия