Batched Stochastic Matching Bandits

#### Контекст В этом исследовании рассматривается фреймворк для стохастического совпадения в скоплении с использованием модели Multi-Nomial Logit (MNL). Эта модель предполагает, что $N$ агентов на одной стороне становятся доступными для $K$ арма на другой стороне. Каждое совпадение происходит с помощью стохастического выбора агента из своего подмножества по неизвестным предпочтениям. Эти совпадения приносят соответствующую награду. Цель заключается в минимизации регрета, что означает максимизацию общей награды из удачных совпадений. Таким образом, необходимо решить комбинаторную задачу оптимизации на основе неизвестных предпочтений, которая является NP-трудной и приводит к вычислительной сложности $O(K^N)$ за каждый раунд. Это ограничивает эффективность базовых алгоритмов. #### Метод Для данной задачи предлагается методология, основанная на батч-обновлениях совпадений. Алгоритмы ограничивают частоту обновлений совпадений, чтобы сократить амортизационный косвенный расход до $O(1)$. Технические решения включают модель MNL для предсказания предпочтений и интерпретацию результатов в контексте стохастического совпадения. Архитектура алгоритма базируется на выборе эффективных сочетаний параметров, чтобы минимизировать регрет с минимальным косвенным расходом. #### Результаты Выполнены эксперименты на синтетических данных, где были получены результаты по значению регрета и эффективности комбинаторной оптимизации. Для задачи с $N = 100$ агентами и $K = 10$ совпадений, батч-алгоритм показал регрет $\tilde{O}(\sqrt{T})$ с амортизационным расходом $O(1)$. Эти результаты показали значительный выигрыш в скорости и точности перед базовыми алгоритмами с $O(K^N)$. #### Значимость Предложенные решения могут применяться в сценариях стохастического совпадения с большим количеством агентов и армов, например, в онлайн-трейдинге, матчинге трудоустройства или системах рекомендаций. Основное преимущество заключается в высокой эффективности и точности решения, даже при увеличении масштаба. Это открывает новые возможности для оптимизации в области сложных совпадений. #### Выводы Основные достижения этой работы заключаются в предложении эффективных батч-алгоритмов для решения стохастического совпадения на основе MNL. Будущие исследования будут нацелены на расширение этой модели на более сложные сценарии, включая нелинейные предпочтения и динамические параметры.