Bayesian Parametric Matrix Models: Principled Uncertainty Quantification for Spectral Learning
2509.12406v1
cs.LG, stat.ML
2025-09-18
Авторы:
Mohammad Nooraiepour
Резюме на русском
## Контекст
Спектральные методы становятся всё более популярными в области научных вычислений для понимания физических систем. Однако, текущие подходы к спектральному обучению обычно ограничиваются только точечными оценками, не учитывающими неопределённость. Это ограничение ограничивает применимость таких методов в сегментах, где конфиденциальность предсказаний является критически важной. Модели параметрических матриц, тем не менее, оказались эффективными средствами в области научных вычислений, достигших великолепной производительности за счёт учёта решений уравнений. Несмотря на это, их детерминированный характер существенно ограничивает их применение в задачах по выработке неопределённости. Данная работа предлагает развитие этой темы, предлагая новый подход, который будет объединять мощь параметрических моделей с теорией вероятностей для получения более надёжных исследований неопределённости.
## Метод
Мы предлагаем **Bayesian Parametric Matrix Models (B-PMM)**, новый фреймворк, который расширяет применение параметрических моделей матриц, добавляя компоненту неопределённости. Данная модель основывается на адаптивном спектральном декомпозиции, использующей регуляризованные матричные пределы для характеризации неопределённости в виде векторов вероятностей. Важным элементом является инновационный подход к вариационной инференции, применяющий матрично-векторные гауссовые модели, которые учитывают структурные ограничения матриц, такие как гермитовость. Для обеспечения доказательств теоретических свойств, таких как финитно-образуемость и калибровка, были использованы теоретические анализы, основывающиеся на характеристиках спектра матриц и их условии устойчивости.
## Результаты
В экспериментах, проведённых на матрицах различных размеров (от 5x5 до 500x500), показано, что B-PMM обеспечивают высокую точность и калибровку неопределённости, достигнув близких к идеальным значениям (ECE < 0.05). Модель продемонстрировала устойчивость при работе с ограниченно усложнёнными задачами, в том числе при близком к дегенерации спектре. Благодаря структурированным алгоритмам вариационной инференции, B-PMM обеспечивают эффективность вычислений, не теряя в точности. Экспериментальные результаты подтверждают мощь фреймворка в объединении точности и надежности неопределённости для решения задач в критически важных сферах.
## Значимость
B-PMM представляют собой значительный шаг в области спектрального обучения с теоретическим обоснованием и практически
Abstract
Scientific machine learning increasingly uses spectral methods to understand
physical systems. Current spectral learning approaches provide only point
estimates without uncertainty quantification, limiting their use in
safety-critical applications where prediction confidence is essential.
Parametric matrix models have emerged as powerful tools for scientific machine
learning, achieving exceptional performance by learning governing equations.
However, their deterministic nature limits deployment in uncertainty
quantification applications. We introduce Bayesian parametric matrix models
(B-PMMs), a principled framework that extends PMMs to provide uncertainty
estimates while preserving their spectral structure and computational
efficiency. B-PMM addresses the fundamental challenge of quantifying
uncertainty in matrix eigenvalue problems where standard Bayesian methods fail
due to the geometric constraints of spectral decomposition. The theoretical
contributions include: (i) adaptive spectral decomposition with regularized
matrix perturbation bounds that characterize eigenvalue uncertainty
propagation, (ii) structured variational inference algorithms using
manifold-aware matrix-variate Gaussian posteriors that respect Hermitian
constraints, and (iii) finite-sample calibration guarantees with explicit
dependence on spectral gaps and problem conditioning. Experimental validation
across matrix dimensions from 5x5 to 500x500 with perfect convergence rates
demonstrates that B-PMMs achieve exceptional uncertainty calibration (ECE <
0.05) while maintaining favorable scaling. The framework exhibits graceful
degradation under spectral ill-conditioning and provides reliable uncertainty
estimates even in near-degenerate regimes. The proposed framework supports
robust spectral learning in uncertainty-critical domains and lays the
groundwork for broader Bayesian spectral machine learning.
Ссылки и действия
Дополнительные ресурсы: