Distinguishing Startle from Surprise Events Based on Physiological Signals
2509.09799v1
cs.LG, cs.HC
2025-09-16
Авторы:
Mansi Sharma, Alexandre Duchevet, Florian Daiber, Jean-Paul Imbert, Maurice Rekrut
Резюме на русском
## Контекст
Безопасность в высокорисковых средах, таких как авиация, чрезвычайно важна. В таких условиях непредвиденные события могут серьезно затруднить принятие решений и снизить эффективность реакции. Особый интерес представляют реакции, такие как стартель и удивление, которые влияют на поведение по разному, но часто трудно отличить в реальных условиях. Несмотря на ранее проведенные исследования, которые изучали эти реакции по отдельности, есть недостаточное понимание их связи и способов их различения с помощью физиологических данных. В настоящем исследовании мы стремимся заполнить эту гап, объединив методы машинного обучения и мультимодального объединения данных для точного распознавания стартеля и удивления.
## Метод
Мы использовали методы машинного обучения, включающие в себя Support Vector Machine (SVM) и Gradient Boosting (XGBoost), для классификации событий на основе физиологических сигналов. Данные были собраны с помощью ЭЭГ, PPG и других приборов, измеряющих различные аспекты физиологического состояния человека. Для увеличения точности классификации была применена мультимодальная фузионная тактика, которая объединила сигналы из нескольких источников данных. Также была определена базовая условия для сравнения. Модель была тренирована и тестирована на различных подмножествах данных для оценки надежности.
## Результаты
Результаты экспериментов показали, что модель может точно распознавать события стартеля и удивления. Наивысшая доля правильных ответов (accuracy) достигла 85.7% при использовании SVM и Late Fusion. В рамках базового условия модель также успешно отличала стартель, удивление и нормальное состояние, достигая accuracy 74.9% при XGBoost и Late Fusion. Эти результаты установили, что модель достаточно надежно распознает различия между этими событиями, даже в условиях большого разброса физиологических сигналов.
## Значимость
Результаты имеют расширенные применения в авиации, военной инфраструктуре и других высокорисковых сферах. Эта модель позволяет более точно прогнозировать поведение пилотов и других специалистов в условиях неожиданных событий, улучшая реакцию и безопасность. Также модель может быть использована в области телемедицины для диагностики психологических расстройств. Благодаря мультимодальному подходу, данный метод обеспечивает высокую точность и устойчивость к шуму в данных.
## Выводы
Мы доказали, что различие между стартелем и удивлением можно надежно определить с помощью физиологических сигналов и машинного обучения. Это открывает новые перспективы для повышения безопасности в сложных операционных условиях. В будущем нам предсто
Abstract
Unexpected events can impair attention and delay decision-making, posing
serious safety risks in high-risk environments such as aviation. In particular,
reactions like startle and surprise can impact pilot performance in different
ways, yet are often hard to distinguish in practice. Existing research has
largely studied these reactions separately, with limited focus on their
combined effects or how to differentiate them using physiological data. In this
work, we address this gap by distinguishing between startle and surprise events
based on physiological signals using machine learning and multi-modal fusion
strategies. Our results demonstrate that these events can be reliably
predicted, achieving a highest mean accuracy of 85.7% with SVM and Late Fusion.
To further validate the robustness of our model, we extended the evaluation to
include a baseline condition, successfully differentiating between Startle,
Surprise, and Baseline states with a highest mean accuracy of 74.9% with
XGBoost and Late Fusion.
Ссылки и действия
Дополнительные ресурсы: