CoVariance Filters and Neural Networks over Hilbert Spaces

## Контекст Область исследования связана с графными сверточными сетями, которые проводят графовые свертки на эмпирической ковариационной матрице сигналов, определенных на финитных-измеренных Хильбертовых пространствах. Эти сети хорошо работают в задачах обнаружения и классификации сигналов, обеспечивая высокую точность и невысокую стоимость вычислений. Однако, существуют ли эти свойства в бесконечномерных Хильбертовых пространствах? Этот вопрос остается открытым. Одним из мотивов для рассмотрения этой области является необходимость расширить область применения сверточных сетей на более широкие классы сигналов и нелинейных структур. Таким образом, целью этой работы является разработка нового конвелюционного фреймворка для сигналов бесконечно-измеренных Хильбертовых пространств, основываясь на ковариационной операторной модели. ## Метод Мы предлагаем вводить **Hilbert CoVariance Filters (HVFs)** — специальные фильтры, которые оперируют над ковариационными операторами в бесконечномерных Хильбертовых пространствах. Эти фильтры формируются в составе **Hilbert CoVariance Networks (HVNs)**, которые представляют собой сложную структуру, включающую несколько слоев HVFs с нелинейными активациями. Для реализации предлагается принципиальная процедура дискретизации, которая позволяет перейти от непрерывной модели к цифровой. Мы доказываем, что HVFs могут эффективно реализовывать **Functional PCA (FPCA)**, что позволяет анализировать и классифицировать сигналы в бесконечно-измеренных пространствах. В качестве испытаний мы приводим примеры, включая синтетический классификационный пример, а также реальные данные временных рядов. ## Результаты Мы проводили опыты на двух типах данных: 1) синтетических временных рядов, 2) реальных временных рядов. Для этих задач мы сравнивали результаты классификации наших HVNs с двумя другими методами: 1) обычными сверточными сетями (MLPs), 2) FPCA-based classifiers. Наши результаты показывают, что HVNs показывают высокую точность классификации на обоих типах данных, а также демонстрируют лучшую устойчивость и точность по сравнению с другими методами. Также мы показываем, что построенная архитектура дает более низкие ошибки, чем MLPs и FPCA-based classifiers, при одинаковом количестве слоев и фильтров. ## Значимость Наше доказательство показывает, что Хильбертовые ковариационные фильтры и сети могут использоваться в бесконечномерных пространствах, что расширяет их поле применения, включая дополнительные классы сигналов и нелинейных структур. Это открывает возможности для использования в различных областях, таких как анализ временных рядов, обработка сигналов