Temporal User Profiling with LLMs: Balancing Short-Term and Long-Term Preferences for Recommendations

## Контекст Акurateльное моделирование пользовательских предпочтений является ключевым фактором для улучшения эффективности контентных рекомендательных систем. Несмотря на развитие технологий, многие существующие подходы продолжают использовать простой анализ пользователей, таких как среднее или конкатенация объединенных представлений предметов. Эти методы недостаточно точно отражают динамику пользовательских предпочтений, особенно взаимодействие между долгосрочными и краткосрочными предпочтениями. Таким образом, есть необходимость в разработке более точного метода описания пользователей, который учитывает эти динамические изменения. Наше исследование сосредоточено на разработке метода, который учитывает эти динамические изменения, используя технологии больших языковых моделей (LLM), чтобы улучшить качество рекомендаций. ## Метод Мы предлагаем LLM-driven Temporal User Profiling (LLM-TUP), метод, который явно моделирует короткосрочные и долгосрочные предпочтения пользователей. Метод использует временные метки взаимодействий пользователей для точного определения отдельных предпочтений. Для представления пользовательской истории взаимодействий используется большая языковая модель (LLM), которая генерирует естественный языковой синтаксис, описывающий поведение пользователя. Эти естественно-языковые представления кодируются в высокомерные векторы с помощью предварительно обученной модели BERT. Далее, алгоритм применяет механизм аттенции (attention) для динамического слияния короткосрочных и долгосрочных представлений в единое полное представление пользователя. Этот подход позволяет учитывать обе эти аспекта предпочтений, чтобы повысить точность рекомендаций. ## Результаты Мы провели эксперименты с использованием реальных данных из различных рекомендательных систем. Наши результаты показали, что LLM-TUP превосходит несколько базовых подходов в сравнительных тестах. Мы сравнили нашу модель с другими методами, которые не учитывали динамику предпочтений, и показали, что LLM-TUP не только улучшает точность рекомендаций, но и обеспечивает более глубокое понимание пользовательского поведения. Эти результаты подтверждают значимость таких подходов, которые используют естественную семантику, предоставляемую большими языковыми моделями, для повышения качества рекомендаций. ## Значимость Предложенный подход может быть применен в различных областях, включая коммерческие рекомендательные системы, социальные сети и другие системы, требующие точного понимания пользовательских предпочтений. Особым преимуществом является улучшенная точность рекомендаций, полученная благодаря точному моделированию динамики пользовательских предпочт