Online Learning for Approximately-Convex Functions with Long-term Adversarial Constraints

#### Контекст Область исследования заключается в online learning с долгосрочными бюджетными ограничениями в адверсарском настройке. Это задача, в которой на каждом шагу $t$, школа выбирает действие из конвексийного решения множества, после что адверсар открывает функцию затрат $f_t$ и функцию потребления ресурсов $g_t$. Функции затрат и потребления считаются $\alpha$-приближенно конвексиевыми — широкой категорией, которая обобщает конвексионность и затрагивает многие неконвексионные задачи, такие как DR-субмодулярная оптимизация, Online Vertex Cover и Regularized Phase Retrieval. Цель заключается в создании онлайн-алгоритма, минимизирующего суммарную затрату за продолжительность $T$, при этом приближенно соблюдая долгосрочное ограничение бюджета $B_T$. Задача хорошо моделирует прикладные сценарии, где необходимо принимать решения в условиях неопределенности и ограничений ресурсов. #### Метод Методология основывается на разработке эффективного first-order онлайн-алгоритма, который обеспечивает $O(\sqrt{T})$ $\alpha$-regret в отношении оптимальной фиксированной возможной стратегии. Алгоритм реализуется в двух сценариях: полной информации и бандитной обратной связи. Он использует приближение $\alpha$-конвексиевых функций через линейные аппроксимации, что позволяет эффективно обрабатывать их нестандартные свойства. Для обеспечения бюджетного соблюдения, алгоритм использует стохастическую оценку потребления ресурсов и уточняющие шаги для соблюдения долгосрочных ограничений. Архитектура алгоритма основывается на методах онлайн-консенсуса и градиентного спуска, адаптированных для $\alpha$-конвексионных функций. #### Результаты Эксперименты подтвердили эффективность алгоритма в различных сценариях. На полнотелых данных, алгоритм достиг $O(\sqrt{T})$ $\alpha$-regret, который соответствует наилучшей известной теоретической границе. В сценарии бандитной обратной связи, алгоритм эффективно решает проблему Adversarial Bandits with Knapsacks, улучшив существующие гарантии. Демонстрируется, что результаты хорошо согласуются с нижними оценками, подтверждая точность и силу алгоритма. Данные результаты являются ключевыми для применения в области нестандартных оптимизационных задач, где необходимо сочетать гибкость и эффективность. #### Значимость Полученные результаты имеют широкое применение в задачах, где требуется принятие решений в условиях неопределенности и ограничений ресурсов, например, в доставке под заказ, энергоэффективности и менеджменте ресурсов. Основные преимущества заключаются в улучшенных гарантиях regret и ресурсопотребления по сравн