Bayesian autoregression to optimize temporal Matérn kernel Gaussian process hyperparameters

2508.09792v1 cs.LG, eess.SP, stat.ML 2025-08-15
Авторы:

Wouter M. Kouw

Резюме на русском

## Контекст Gaussian processes являются важной моделью в области проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы проблемы. Однако, оптимизация гиперпараметров ковариационной функции Матерна в таких моделях часто является нетривиальной задачей. Необходимость эффективных методов для восстановления этих гиперпараметров мотивирует разработку новых подходов. ## Метод Предлагаемый подход основывается на использовании авторегрессионной модели для оптимизации гиперпараметров Матерна. Мы представляем гиперпараметры как параметры авторегрессионной модели, что позволяет применить байесовский подход для их оценки. Эта модель позволяет эффективно обрабатывать данные временных рядов, используя свойства Матерна. ## Результаты Мы проводим эксперименты на основе реальных данных для сравнения предлагаемого подхода с двумя другими методами: оптимизацией максимальной вероятности и использованием Хаммильтоновского монте-карло. Результаты показывают, что предлагаемый подход демонстрирует лучшую скорость работы и более точные результаты в температурной оценке гиперпараметров Матерна. ## Значимость Предлагаемый подход может быть применен во многих областях, где требуется прогнозировать временные ряды, таких как прогнозирование климата, мониторинг здоровья и финансовое моделирование. Он предлагает выгоды как в скорости работы, так и в точности. ## Выводы Предлагаемый подход является эффективным для оптимизации гиперпараметров Матерна в задачах прогнозирования временных рядов. Будущие исследования будут ориентированы на расширение этого подхода для работы с более сложными моделями и данными.

Abstract

Gaussian processes are important models in the field of probabilistic numerics. We present a procedure for optimizing Mat\'ern kernel temporal Gaussian processes with respect to the kernel covariance function's hyperparameters. It is based on casting the optimization problem as a recursive Bayesian estimation procedure for the parameters of an autoregressive model. We demonstrate that the proposed procedure outperforms maximizing the marginal likelihood as well as Hamiltonian Monte Carlo sampling, both in terms of runtime and ultimate root mean square error in Gaussian process regression.

Ссылки и действия