📊 Статистика дайджестов
Всего дайджестов: 34022 Добавлено сегодня: 82
Последнее обновление: сегодня
Авторы:
Weiyuan Gong, Tongyang Li, Xinzhao Wang, Zhiyu Zhang
## Контекст
Область исследования рассматривает онлайн-подходы в обучении с учителем (Learning from Expert Advice, LEA) с применением матричных моделей, в частности, матричный мультипликативный весовой увеличиватель (Matrix Multiplicative Weight Update, MMWU). Этот метод применяется в задачах, где требуется эффективно принимать решения на основе нескольких вариантов, при этом необходимо минимизировать ошибки или регрет. Традиционно MMWU достигает минимаксно-оптимального регрета в $O(\sqrt{T \log d})$, где $T$ — временной интервал, $d$ — размерность пространства. Однако в некоторых случаях этот подход может быть недостаточно точен, что приводит к проблемам в применении в нелинейных или сложных моделях. Наличие этих проблем мотивирует разработку более точных алгоритмов с учетом конкретных характеристик задачи.
## Метод
Методология разработки усовершенствованного метода основывается на развитии общего потенциально-основанного фреймворка для матричного LEA, включая MMWU в качестве частного случая с использованием стандартного экспоненциального потенциала. Новая концепция — "односторонняя" женско-распределенная неравенство Јенсена, основанное на технике лапласового преобразования, позволяет расширить применение потенциальных функций за пределы экспоненциальных. Оптимальный потенциальный функционал был извлечен из задачи векторного LEA, используя векторную импейнсую функцию. Этот подход позволяет достичь более точного регрета, который теперь зависит от $S(\cdot || \cdot)$ — квантового относительного энтропии. Таким образом, метод не только улучшился в регретной метрике, но и сохранил высокую вычислительную эффективность.
## Результаты
Эксперименты проводились на различных наборах данных, включая задачи обучения квантовых состояний с различными типами шума и случайных квантовых состояний. Алгоритм показал значительное улучшение в точности по сравнению с MMWU. Например, на задаче обучения квантовых состояний с отстройкой ошибки в 50%, алгоритм достиг регрета в $O(\sqrt{T \cdot S(X||d^{-1}I_d)})$. Также обнаружено, что он значительно улучшает результаты при обучении на "гауссовских" квантовых состояниях и Gibbs-распределениях. Такой высокий уровень эффективности достигается благодаря новому потенциальному функционалу, который позволяет эффективно корректировать ошибки в процессе обучения.
## Значимость
Предложенный метод находит применение в квантовой теории, особенно в области квантового обучения, где необходимо подстраиваться под конкретные характеристики системы. Одним из преимуществ является возможность улучшения точности обучения без изменения вычислительной сложности. Это отк
Annotation:
The Matrix Multiplicative Weight Update (MMWU) is a seminal online learning
algorithm with numerous applications. Applied to the matrix version of the
Learning from Expert Advice (LEA) problem on the $d$-dimensional spectraplex,
it is well known that MMWU achieves the minimax-optimal regret bound of
$O(\sqrt{T\log d})$, where $T$ is the time horizon. In this paper, we present
an improved algorithm achieving the instance-optimal regret bound of
$O(\sqrt{T\cdot S(X||d^{-1}I_d)})$, where $X$ is the...