Multi-Item-Query Attention for Stable Sequential Recommendation

2509.24424v1 cs.IR, cs.AI, cs.LG 2025-10-01
Авторы:

Mingshi Xu, Haoren Zhu, Wilfred Siu Hung Ng

Резюме на русском

## Контекст Поиск эффективных методов построения системы рекомендаций последовательностей является важной задачей в области машинного обучения. Одним из ключевых вызовов является нестабильность и шум в пользовательских данных о взаимодействии. Из-за этого, модели, основанные на маскированной активности, часто оказываются слишком чувствительными к этим факторам, что приводит к ухудшению точности прогнозирования. Это ставит перед исследователями задачу разработки более устойчивых и точных моделей для рекомендаций последовательностей. ## Метод Метод, предложенный в статье, основывается на разработке многопутевого механизма активности (MIQ-Attn), который использует несколько разных векторов запроса из пользовательских данных. Этот подход позволяет сократить эффект шума в данных и улучшить стабильность модели. Механизм MIQ-Attn предлагается как дополнение к существующим моделям, легко интегрируемый с ними в качестве замены единичному запросу в алгоритмах. Таким образом, он может быть использован для улучшения любых моделей, основанных на активности. ## Результаты Исследователи проверили свой подход на нескольких бенчмарк-датасетах, сравнивая результаты с традиционными моделями. Эксперименты показали, что MIQ-Attn существенно повышает точность рекомендаций и улучшает устойчивость модели к шуму в данных. На основе этих результатов можно сделать вывод, что MIQ-Attn является эффективным инструментом для решения проблем нестабильности в последовательных рекомендациях. ## Значимость Этот подход может быть применен в различных областях, включая рекомендации покупок, медиа-контента, социальных сетей и других системах, где необходимо предоставить пользователю наиболее актуальные и подходящие рекомендации. Особым преимуществом является увеличение устойчивости модели к внешним факторам и шумам в данных, что может привести к более точным и надежным результатам. ## Выводы Результаты исследования показывают, что MIQ-Attn является эффективным методом для улучшения стабильности и точности моделей последовательных рекомендаций. Будущие исследования могут сосредоточиться на расширении этого подхода для работы с более сложными данными и исследовании его применения в различных прикладных сферах.

Abstract

The inherent instability and noise in user interaction data challenge sequential recommendation systems. Prevailing masked attention models, relying on a single query from the most recent item, are sensitive to this noise, reducing prediction reliability. We propose the Multi-Item-Query attention mechanism (MIQ-Attn) to enhance model stability and accuracy. MIQ-Attn constructs multiple diverse query vectors from user interactions, effectively mitigating noise and improving consistency. It is designed for easy adoption as a drop-in replacement for existing single-query attention. Experiments show MIQ-Attn significantly improves performance on benchmark datasets.

Ссылки и действия