Bayesian Parametric Matrix Models: Principled Uncertainty Quantification for Spectral Learning

2509.12406v1 cs.LG, stat.ML 2025-09-18
Авторы:

Mohammad Nooraiepour

Резюме на русском

## Контекст Спектральные методы становятся всё более популярными в области научных вычислений для понимания физических систем. Однако, текущие подходы к спектральному обучению обычно ограничиваются только точечными оценками, не учитывающими неопределённость. Это ограничение ограничивает применимость таких методов в сегментах, где конфиденциальность предсказаний является критически важной. Модели параметрических матриц, тем не менее, оказались эффективными средствами в области научных вычислений, достигших великолепной производительности за счёт учёта решений уравнений. Несмотря на это, их детерминированный характер существенно ограничивает их применение в задачах по выработке неопределённости. Данная работа предлагает развитие этой темы, предлагая новый подход, который будет объединять мощь параметрических моделей с теорией вероятностей для получения более надёжных исследований неопределённости. ## Метод Мы предлагаем **Bayesian Parametric Matrix Models (B-PMM)**, новый фреймворк, который расширяет применение параметрических моделей матриц, добавляя компоненту неопределённости. Данная модель основывается на адаптивном спектральном декомпозиции, использующей регуляризованные матричные пределы для характеризации неопределённости в виде векторов вероятностей. Важным элементом является инновационный подход к вариационной инференции, применяющий матрично-векторные гауссовые модели, которые учитывают структурные ограничения матриц, такие как гермитовость. Для обеспечения доказательств теоретических свойств, таких как финитно-образуемость и калибровка, были использованы теоретические анализы, основывающиеся на характеристиках спектра матриц и их условии устойчивости. ## Результаты В экспериментах, проведённых на матрицах различных размеров (от 5x5 до 500x500), показано, что B-PMM обеспечивают высокую точность и калибровку неопределённости, достигнув близких к идеальным значениям (ECE < 0.05). Модель продемонстрировала устойчивость при работе с ограниченно усложнёнными задачами, в том числе при близком к дегенерации спектре. Благодаря структурированным алгоритмам вариационной инференции, B-PMM обеспечивают эффективность вычислений, не теряя в точности. Экспериментальные результаты подтверждают мощь фреймворка в объединении точности и надежности неопределённости для решения задач в критически важных сферах. ## Значимость B-PMM представляют собой значительный шаг в области спектрального обучения с теоретическим обоснованием и практически

Abstract

Scientific machine learning increasingly uses spectral methods to understand physical systems. Current spectral learning approaches provide only point estimates without uncertainty quantification, limiting their use in safety-critical applications where prediction confidence is essential. Parametric matrix models have emerged as powerful tools for scientific machine learning, achieving exceptional performance by learning governing equations. However, their deterministic nature limits deployment in uncertainty quantification applications. We introduce Bayesian parametric matrix models (B-PMMs), a principled framework that extends PMMs to provide uncertainty estimates while preserving their spectral structure and computational efficiency. B-PMM addresses the fundamental challenge of quantifying uncertainty in matrix eigenvalue problems where standard Bayesian methods fail due to the geometric constraints of spectral decomposition. The theoretical contributions include: (i) adaptive spectral decomposition with regularized matrix perturbation bounds that characterize eigenvalue uncertainty propagation, (ii) structured variational inference algorithms using manifold-aware matrix-variate Gaussian posteriors that respect Hermitian constraints, and (iii) finite-sample calibration guarantees with explicit dependence on spectral gaps and problem conditioning. Experimental validation across matrix dimensions from 5x5 to 500x500 with perfect convergence rates demonstrates that B-PMMs achieve exceptional uncertainty calibration (ECE < 0.05) while maintaining favorable scaling. The framework exhibits graceful degradation under spectral ill-conditioning and provides reliable uncertainty estimates even in near-degenerate regimes. The proposed framework supports robust spectral learning in uncertainty-critical domains and lays the groundwork for broader Bayesian spectral machine learning.

Ссылки и действия