Empirical Evidences for the Effects of Feature Diversity in Open Set Recognition and Continual Learning

## Контекст Открытый распознавание классов (Open Set Recognition, OSR) и стремительное обучение (Continual Learning, CL) представляют собой важные проблемы в машинном обучении, каждая из которых имеет свои характерные характеристики и задачи. OSR затрагивает обнаружение новых классов во время инференции, тогда как CL нацелено на обновление моделей для включения новых классов. Оба эти подхода имеют много общего, включая необходимость обработки неожиданных данных и улучшения общей гибкости. Несмотря на то, что многие подходы к OSR и CL полагаются на усиление разнообразия признаков, изучение прямого влияния разнообразия признаков на эти проблемы остается недостаточно детальным. Мы предлагаем эмпирическую исследовательскую работу, которая основывается на освещении этих тем. ## Метод Для изучения влияния разнообразия признаков на OSR и CL мы использовали множество экспериментов с различными моделями и архитектурами. В частности, мы проводили эксперименты с применением метода баллансировки признаков (Feature Balancing) и методом добавления шума (Noise Injection), чтобы улучшить разнообразие признаков. Также мы оценивали их влияние на качество распознавания классов, на устойчивость моделей к отвлеченным классам, и на их возможность кластеризации данных. Мы рассматривали различные модели глубокого обучения, включая ResNet и WideResNet, чтобы проверить наши находки на разных структурах моделей. ## Результаты Наши эксперименты показали, что увеличение разнообразия признаков существенно повышает точность распознавания открытых классов в OSR. Кроме того, этот подход также улучшает модели CL, обеспечивая лучшую запоминание предыдущих классов и более эффективную интеграцию новых классов. Мы обнаружили, что Feature Balancing и Noise Injection могут значительно улучшить оценки F1-score и AUROC в задачах OSR. Был также проанализирован их влияние на продолжительность сеанса обучения и на метрики гибкости моделей в CL. ## Значимость Результаты указывают на важность разнообразия признаков в OSR и CL. Наши находки могут иметь практическое применение в сценариях, где необходимо обнаруживать новые классы в реальном времени, такие как обнаружение обмана в защите от атак (Anomaly Detection) или в системах распознавания образов, где новые классы постоянно появляются. Благодаря улучшенному разнообразию признаков, модели не только становятся более точными, но и становятся более устойчивыми к изменениям в данных. Это может быть ключевым преимуществом в ситуациях, где требуется гарантия постоянной точности модели в процессе обучения и использования. ## Выводы Мы подтвердили, что улучшение разнообразия признаков может значительно улучшить