MPFormer: Adaptive Framework for Industrial Multi-Task Personalized Sequential Retriever

#### Контекст Modern industrial recommendation systems сталкиваются со сложной задачей оптимизации, когда необходимо учитывать множество задач одновременно. Например, во время поиска содержимого или рекомендации видео, необходимо учитывать не только рентабельность, но и пользовательский интерес, свежесть контента и другие факторы. Эта неоднородная структура задач часто приводит к конфликту между различными целями, который может быть неэффективно разрешен с помощью стандартных подходов. Одна из самых сложных проблем в этой области — это ситуация, когда необходимо оптимизировать несколько целей одновременно, но инструменты, используемые в рекомендательных системах, часто ориентированы только на одну цель. Эта проблема требует новых подходов, которые могут динамически адаптироваться к различным задачам и при этом сохранять эффективность и скорость выполнения. #### Метод MPFormer представляет собой динамическую систему, основанную на Transformer, которая разработана для решения задач многозадачной оптимизации в рекомендательных системах. Основное отличие этой модели заключается в том, что она использует **objective-conditioned Transformer**, который может динамически адаптироваться к разным целям. Это достигается за счет **learnable attention modulation**, который позволяет модели учитывать различные веса для каждой задачи в ходе поиска и рекомендации. Эта модель также включает в себя **personalized target weights**, чтобы сделать рекомендации более привлекательными для каждого пользователя. Также, MPFormer включает в себя **user personalization information** в свою структуру, чтобы улучшить представление пользовательских поведенческих данных. Эта модель является адаптивной и может автоматически регулироваться для разных задач, чтобы обеспечивать эффективное решение многозадачных задач в рекомендательных системах. #### Результаты Проведенные эксперименты показали, что MPFormer эффективно работает в реальных условиях. Она была интегрирована в Kuaishou short video recommendation system, которая обслуживает более 400 миллионов пользователей ежедневно. Исследования показали, что MPFormer улучшает **daily engagement** пользователей и **system operational efficiency**. Например, сравнительные тесты показали, что MPFormer более эффективно работает, чем стандартные модели, которые не имеют динамической адаптации к разным задачам. Это демонстрирует, что MPFormer может значительно улучшить качество рекомендаций, сохраняя высокую скорость обслуживания. Эти результаты подтверждают то, что MPFormer является новым шагом в области многозадачных рекомендательных систем. #### Значимость MPFormer может использоваться в различных сферах, включая short video platforms, e-commerce и другие сервисы, где необходима многозадачная оптимизация. Одним из основных преимуществ этой модели является ее **scalability** и **flexibility**, что позволяет ей быть эффективной в разных индустрияльных рекомен