Distinguishing Startle from Surprise Events Based on Physiological Signals

2509.09799v1 cs.LG, cs.HC 2025-09-16
Авторы:

Mansi Sharma, Alexandre Duchevet, Florian Daiber, Jean-Paul Imbert, Maurice Rekrut

Резюме на русском

## Контекст Безопасность в высокорисковых средах, таких как авиация, чрезвычайно важна. В таких условиях непредвиденные события могут серьезно затруднить принятие решений и снизить эффективность реакции. Особый интерес представляют реакции, такие как стартель и удивление, которые влияют на поведение по разному, но часто трудно отличить в реальных условиях. Несмотря на ранее проведенные исследования, которые изучали эти реакции по отдельности, есть недостаточное понимание их связи и способов их различения с помощью физиологических данных. В настоящем исследовании мы стремимся заполнить эту гап, объединив методы машинного обучения и мультимодального объединения данных для точного распознавания стартеля и удивления. ## Метод Мы использовали методы машинного обучения, включающие в себя Support Vector Machine (SVM) и Gradient Boosting (XGBoost), для классификации событий на основе физиологических сигналов. Данные были собраны с помощью ЭЭГ, PPG и других приборов, измеряющих различные аспекты физиологического состояния человека. Для увеличения точности классификации была применена мультимодальная фузионная тактика, которая объединила сигналы из нескольких источников данных. Также была определена базовая условия для сравнения. Модель была тренирована и тестирована на различных подмножествах данных для оценки надежности. ## Результаты Результаты экспериментов показали, что модель может точно распознавать события стартеля и удивления. Наивысшая доля правильных ответов (accuracy) достигла 85.7% при использовании SVM и Late Fusion. В рамках базового условия модель также успешно отличала стартель, удивление и нормальное состояние, достигая accuracy 74.9% при XGBoost и Late Fusion. Эти результаты установили, что модель достаточно надежно распознает различия между этими событиями, даже в условиях большого разброса физиологических сигналов. ## Значимость Результаты имеют расширенные применения в авиации, военной инфраструктуре и других высокорисковых сферах. Эта модель позволяет более точно прогнозировать поведение пилотов и других специалистов в условиях неожиданных событий, улучшая реакцию и безопасность. Также модель может быть использована в области телемедицины для диагностики психологических расстройств. Благодаря мультимодальному подходу, данный метод обеспечивает высокую точность и устойчивость к шуму в данных. ## Выводы Мы доказали, что различие между стартелем и удивлением можно надежно определить с помощью физиологических сигналов и машинного обучения. Это открывает новые перспективы для повышения безопасности в сложных операционных условиях. В будущем нам предсто

Abstract

Unexpected events can impair attention and delay decision-making, posing serious safety risks in high-risk environments such as aviation. In particular, reactions like startle and surprise can impact pilot performance in different ways, yet are often hard to distinguish in practice. Existing research has largely studied these reactions separately, with limited focus on their combined effects or how to differentiate them using physiological data. In this work, we address this gap by distinguishing between startle and surprise events based on physiological signals using machine learning and multi-modal fusion strategies. Our results demonstrate that these events can be reliably predicted, achieving a highest mean accuracy of 85.7% with SVM and Late Fusion. To further validate the robustness of our model, we extended the evaluation to include a baseline condition, successfully differentiating between Startle, Surprise, and Baseline states with a highest mean accuracy of 74.9% with XGBoost and Late Fusion.

Ссылки и действия