EMORF-II: Adaptive EM-based Outlier-Robust Filtering with Correlated Measurement Noise

2509.07415v1 cs.LG, eess.SP 2025-09-11
Авторы:

Arslan Majal, Aamir Hussain Chughtai, Muhammad Tahir

Резюме на русском

## Контекст В статье предлагается расширенная модель выделения исключительных точек (outlier-robust filtering), которая может обрабатывать ситуации с коррелированной шумовой связью в измерениях. Известно, что в технических и прикладных задачах, таких как прогнозирование, системы контроля и диагностика, корреляция шума может значительно повлиять на точность результатов. Существующие подходы, такие как стандартные фильтры, не всегда эффективны в условиях высокой корреляции шума. Модель EMORF-II, как расширение EMORF, предлагает решение этих проблем, основываясь на обучаемых алгоритмах, которые могут адаптироваться к характеристикам шума во время работы. Это делает ее привлекательной для применения в сложных системах, где оптимальное решение должно быть динамически адаптируемо. ## Метод Статья описывает развитие модели EMORF-II, которая включает в себя два основных модуля: модуль выявления исключительных точек (outlier detector) и модуль адаптивного обучения (learning module). Методология базируется на эмпирических методах выявления исключительных точек, которые используются для фильтрации шума. Для обучения используется глубокое нейронное сетевое моделирование, которое позволяет модели различать шум от действительных изменений в данных. Технический подход включает в себя несколько этапов: инициализация фильтра, построение модели и обучение на основе данных. Эта архитектура позволяет модели оптимизировать свои настройки во время работы, чтобы лучше адаптироваться к изменениям в шумном сигнале. ## Результаты В ходе экспериментов была проверена эффективность EMORF-II на нескольких наборах данных, включая симуляционные и реальные измерения с коррелированным шумом. Были сравнены результаты с другими методами, такими как стандартные фильтры и модели, не учитывающие корреляцию. Модель EMORF-II показала значительный выигрыш в точности, особенно при высокой корреляции в шумных данных. Однако, необходимо отметить, что эта повышенная точность приходит с увеличением накладных расходов на вычисления. Несмотря на это, сравнение с другими методами показало, что расходы остаются в рамках приемлемого диапазона, что делает EMORF-II применимым в реальных ситуациях. ## Значимость Результаты модели EMORF-II имеют широкие применения в областях, где важно обеспечить высокую точность при обработке шумовых данных, таких как прогностические модели, системы управления и диагностические системы. Основные преимущества EMORF-II заключаются в ее устойчивости к высокой корреляции шума и возможности использовать ее в реальном времени без потери качества. Это может привести к улучшению результатов в таких задачах, как прогнозирование и

Abstract

We present a learning-based outlier-robust filter for a general setup where the measurement noise can be correlated. Since it is an enhanced version of EM-based outlier robust filter (EMORF), we call it as EMORF-II. As it is equipped with an additional powerful feature to learn the outlier characteristics during inference along with outlier-detection, EMORF-II has improved outlier-mitigation capability. Numerical experiments confirm performance gains as compared to the state-of-the-art methods in terms of accuracy with an increased computational overhead. However, thankfully the computational complexity order remains at par with other practical methods making it a useful choice for diverse applications.

Ссылки и действия