Federated Online Learning for Heterogeneous Multisource Streaming Data

## Контекст Область исследования федеративного обучения подразумевает распределенное анализирование данных из нескольких источников с учетом принципов конфиденциальности. Данная область набирает важность, так как современные реалии требуют эффективных методов для обработки и анализа данных, не приведя к утечке информации. Необходимость решения данной проблемы вызвана возрастающим количеством данных из различных источников, которые должны обрабатываться в режиме реального времени с сохранением уровня безопасности. Традиционные федеративные методы применялись в статических данных, но в реальных системах данные поступают потоком, что требует разработки новых способов обработки потоковых данных, которые могут адаптироваться к изменению структуры и характера данных. Мотивацией для этого исследования является необходимость разработки методов, которые могут эффективно обрабатывать потоковые данные, сохраняя при этом принципы конфиденциальности и уменьшая требования к вычислительным ресурсам. ## Метод В данной работе предлагается Federated Online Learning (FOL) метод для распределенного анализа потоковых данных из нескольких источников. Метод основывается на создании персонализированных моделей для каждого источника данных, чтобы учесть их индивидуальные особенности. Для улучшения результатов используется "subgroup" приближение, которое позволяет корректно отразить схожие характеристики в разных источниках. Метод использует ресурс-эффективные методы обучения, такие как penalized renewable estimation и простой proximal gradient descent. Одним из основных принципов является то, что данные не пересылаются между источниками, что обеспечивает высокий уровень конфиденциальности. Также метод требует только сводных статистических данных из прошлых батчей для обновления модели, что значительно сокращает требования к памяти. Эта архитектура позволяет объединить преимущества федеративного и онлайн-обучения. ## Результаты В ходе экспериментов были проведены симуляции и использованы данные из финансового сегмента и логов веб-запросов. Результаты показали, что FOL-метод эффективен в решении задач классификации и регрессии в реальных ситуациях. Он показал лучшую точность и скорость обучения по сравнению с существующими методами. Метод также продемонстрировал хорошую адаптивность к изменениям данных и способность обрабатывать высокомерностные данные. Данные результаты подтверждают, что FOL может эффективно адаптироваться к потоковым данным, уменьшая затраты на вычисления и обеспечивая высокую точность. ## Значимость Предлагаемый метод может быть применен в различных областях, таких как финансовый анализ, мониторинг трафи