OnePiece: Bringing Context Engineering and Reasoning to Industrial Cascade Ranking System

## Контекст В последние годы становится все более очевидным, что технологии глубокого обучения постепенно трансформируют индустрии, в том числе системы поиска и рекомендаций. Однако, несмотря на всплеск интереса к широкому применению трансформерных архитектур, преимущества, которые они приносят, часто остаются ограниченными. Это можно объяснить тем, что большинство индустриальных систем продолжают опираться на Deep Learning Recommendation Models (DLRMs), ограничиваясь их модификациями. В то же время значительные преимущества, которые приносят технологии, такие как глубокий ранжирований (LLMs), возникают не только из-за изобретений в архитектуре, но и благодаря таким механизмам, как контекстное обогащение и многошаговая логика. Эти механизмы, однако, в рамках индустриальных систем ранжирования, до сих пор остаются недостаточно исследованными. ## Метод OnePiece представляет собой новую архитектуру, которая успешно интегрирует механизмы контекстного обогащения и многошагового рефинемента в ранжирование и поиск в составе индустриальных пайплайнов. Эта модель основывается на трансформерной структуре, но имеет уникальные особенности: (1) **Структурированное контекстное обогащение**, прикрепляющее к входным сигналам как интересы пользователя, так и контекстные признаки сценариев, представленные в виде входных токенов; (2) **Блочное логическое обогащение**, которое вводит итеративные шаги рефинемента представлений, возможность которых растет вместе с размером блока; (3) **Прогрессивное мульти-задачное обучение**, которое строится на цепочках пользовательских фидбеков, позволяя контролировать процесс обучения при развитии модели. ## Результаты Для оценки модели OnePiece проводились различные эксперименты на реальных данных. Мы использовали большие наборы данных из индустриальных систем поиска и рекомендаций. Методами анализа метрик, таких как GMV/UU и доходы из рекламы, были получены очевидные показатели улучшения. Например, исследования показали, что OnePiece добавила до $+2\%$ GMV/UU и $+2.90\%$ в доходы от рекламы. Эти результаты подтверждают, что OnePiece не только улучшает ранжирование, но и увеличивает эффективность системы в целом. ## Значимость Помимо основного применения в системах поиска и рекомендаций, OnePiece может быть распространена в различных индустрияльных сценариях, таких как моделирование поведения покупателей, улучшение рекомендаций в контексте транзакционных систем. Основным преимуществом OnePiece является её способность улучшить качество рекомендаций в целостных индустриальных пайплайнах, что способствует повышению пользовательского привлечения и эффекти