A Minimalist Bayesian Framework for Stochastic Optimization

2509.07030v1 cs.LG, cs.AI, math.OC, stat.ML 2025-09-12
Авторы:

Kaizheng Wang

Резюме на русском

## Контекст Байесовская парадигма предоставляет основанные на теории вероятности средства для распознавания и семантического понимания текста. Однако её применение к задачам стресс-тестирования моделей, построенных на основе байесовской нейронной сети, сталкивается с ограничениями при интеграции сложных структурных ограничений. Это приводит к неэффективности и неточности в оценке моделей. Необходимо разработать метод, который бы устранял эти ограничения и позволял более гибко применять байесовские модели в задачах стресс-тестирования. ## Метод Мы предлагаем использовать минималистическую байесовскую модель, сосредоточенную только на ключевых элементах, таких как локальные ограничения или структурные модели. Несущие прямого вклада в решение параметры устраняются с помощью метода профильной функции правдоподобия. Это позволяет эффективно учитывать сложные структурные ограничения и увеличивает точность моделирования. Также мы развиваем алгоритм MINimalist Thompson Sampling (MINTS), который использует профильную функцию для построения эффективных решений в области пространственного моделирования и динамического ценообразования. ## Результаты Мы проводим эксперименты на имитационных данных, включающих ситуации, где применяются традиционные методы и минималистическая байесовская модель. Результаты показывают, что наши подходы дают значительно более точные оценки моделей в задачах стресс-тестирования по сравнению с традиционными методами. Мы также проверяем наши модели на реальных выборках и показываем, что они обеспечивают более точное понимание структуры и динамики данных. ## Значимость Наш подход может быть применен в различных областях, таких как моделирование рисков в финансовых системах, динамическое ценообразование и стресс-тестирование моделей в архитектурном проектировании. Он продемонстрировал улучшение точности моделирования и эффективность процесса стресс-тестирования. Эта работа также открывает путь к дальнейшим исследованиям в области применения байесовских моделей в сложных задачах, где необходима точная интеграция структурных ограничений. ## Выводы Мы представили минималистическую байесовскую модель, которая эффективно применяется к задачам стресс-тестирования моделей. Наши результаты установили новые стандарты точности и эффективности в этой области. Будущие исследования будут сфокусированы на расширении этой модели для включения более сложных структурных моделей и применении её в различных практических задачах.

Abstract

The Bayesian paradigm offers principled tools for sequential decision-making under uncertainty, but its reliance on a probabilistic model for all parameters can hinder the incorporation of complex structural constraints. We introduce a minimalist Bayesian framework that places a prior only on the component of interest, such as the location of the optimum. Nuisance parameters are eliminated via profile likelihood, which naturally handles constraints. As a direct instantiation, we develop a MINimalist Thompson Sampling (MINTS) algorithm. Our framework accommodates structured problems, including continuum-armed Lipschitz bandits and dynamic pricing. It also provides a probabilistic lens on classical convex optimization algorithms such as the center of gravity and ellipsoid methods. We further analyze MINTS for multi-armed bandits and establish near-optimal regret guarantees.

Ссылки и действия