#### Контекст В последние годы векторные поисковые технологии стали важной частью обработки неструктурированных данных, таких как текст, изображения и аудио. Эти технологии позволяют находить точные или семантически похожие элементы с помощью вычисления векторных представлений. Однако векторы, используемые для такого представления, часто имеют высокую размерность, что приводит к значительным затратам на хранение и обработку данных. Это создает ряд проблем, в том числе увеличение нагрузки на память и стоимости хранения. В данной работе мы предлагаем NVQ (non-uniform vector quantization), новую методику сжатия векторов, которая эффективна как в плане вычислений, так и в плане памяти, особенно при высоких требованиях к точности. #### Метод NVQ основывается на применении нелинейных, параметризируемых функций, которые позволяют создавать неуниформные квантоверторы. Изначально векторы сжимаются с помощью этих функций, а затем квантование производится с учетом нелинейных преобразований. Основная идея заключается в том, что каждый вектор индексируется особым образом, чтобы уменьшить затраты на хранение и обработку. Затем, для каждого вектора индекса настраивается парсиммонная функция, обеспечивающая высокую точность в данных областях. Эта техника позволяет достичь высокой точности с минимальными затратами. #### Результаты Мы проводили эксперименты с NVQ, сравнивая его с другими методами квантования векторов, такими как uniform quantization и PQ (product quantization). Наши результаты показали, что NVQ предоставляет значительное улучшение точности в поиске похожих элементов с минимальными затратами на вычисления. Например, в тестах с поиском семантически похожих векторов, NVQ показал значительное улучшение в точности в сравнении с PQ. Этого достиглось благодаря тому, что NVQ использует индивидуально настроенные нелинейные квантоверторы для каждого вектора, что позволяет минимизировать потери точности при сжатии. #### Значимость NVQ может быть применено в различных областях, таких как видеонаблюдение, транспортная система, системы рекомендаций и машинное обучение. Одним из ключевых преимуществ является снижение стоимости хранения векторных данных без потери точности. NVQ также обеспечивает высокую скорость поиска, что делает его привлекательным для реального времени интерактивных систем. Благодаря своему подходу, NVQ может существенно улучшить эффективность и экономичность систем поиска и рекомендаций в сложных неструктурированных данных. #### Выводы В данной работе мы представили NVQ, новую методику квантования векторов, которая достигает высокой точности с минимальными затратами на вычисления. Наша методика имеет большой

## Контекст Поиск информации с использованием компактных бинарных векторов, так называемых хешированием, является ключевым инструментом для решения задач ускоренного поиска. Однако современные методы хеширования часто требуют дорогостоящей и специфичной для сценария обучения, что ограничивает их применение в более широких контекстах. Наблюдается необходимость в эффективных, простых и надежных подходах, которые могут использоваться в различных областях без трудоемкой настройки. ## Метод На основе современных моделей глубокого обучения, особенно тех, что основаны на предобученных энкодерах, авторы предлагают Hashing-Baseline. Этот метод не требует дополнительного обучения и основывается на классических техниках хеширования, таких как основные компоненты, случайные ортогональные проекции и терминальное бинарирование. Метод использует "фризированные" предобученные вектора из моделей для визуальных и звуковых данных, что позволяет получить высокую эффективность в поиске и сравнении информации без дополнительных трудозатрат на обучение. ## Результаты На ряде стандартных задач (например, изображения и звуковых файлов) Hashing-Baseline показал отличные результаты, подходящие по качеству к существующим тренируемым методам. Авторы проверили свои результаты на визуальных базах данных и ввели новую задачу для аудио-хеширования. Эта методика доказала свою обобщаемость и эффективность, даже при использовании "нативных" бинарных векторов без дополнительных модификаций. ## Значимость Предложенная система может быть применена в различных областях, где требуется быстрый поиск, например, в области визуального и аудио-контента. Она предлагает преимущество в своей простоте, быстродействии и не требует дополнительных ресурсов для обучения. Это может существенно упростить применение хеширования в реальном времени и на больших объемах данных. ## Выводы Hashing-Baseline демонстрирует, что предобученные модели могут быть эффективно использованы для хеширования без дополнительного обучения. Это открывает путь к более простой и доступной информационной системе. Будущие исследования могут сосредоточиться на оптимизации техник хеширования и исследовании их применения в новых задачах.

## Контекст Генерирующая рекомендация является ключевым компонентом персонализированных систем, предсказывающих будущие взаимодействия пользователей на основе истории их поведения. Одна из ключевых проблем при обучении таких моделей заключается в усложненном процессе подготовки данных, который включает в себя виды технических решений, таких как **процесс подготовки обучающих данных**. Этот процесс влияет на обучение модели, на ее поведение в рабочей среде и, в итоге, на ее точность и удовлетворение пользователей. Troppo длинно и непонятно. Надо делать все намного короче, понятнее и более простым языком. ## Метод В генерирующих моделях рекомендации процесс подготовки обучающих данных часто сводится к простому разбиению последовательных данных. Однако эта простая модель может недостаточно охватывать весь спектр возможных вариантов обучения. Мы предлагаем GenPAS — универсальный фреймворк, который моделирует подготовку данных как стохастический процесс сбора пар входных-целевых данных. Он делится на три этапа: **выбор последовательности**, **выбор цели**, **выбор входных данных**, и позволяет регулировать биазы в подготовке данных. Этот подход унифицирует многие существующие методы и позволяет быстрее экспериментировать с ними. ## Результаты Мы провели эксперименты на разных рекомендательных данных и проанализировали различные стратегии подготовки данных. Наши результаты показали, что предлагаемый GenPAS дает намного лучшую точность и эффективность использования данных по сравнению с другими методами. Также мы показали, что GenPAS дает лучший результат в задаче генерирования рекомендаций, особенно в подходах, которые до этого были недостаточно изучены. ## Значимость Предлагаемый подход может применяться в различных областях, где требуется рекомендация, например, в маркетинге, в социальных сетях и в технологиях личных рекомендаций. Он позволяет улучшить качество рекомендаций и снизить необходимое время обучения, что дает преимущество в реальном времени. Этот подход может стать базовым для дальнейшего исследования эффективности и систематизации подготовки данных в генерирующих рекомендательных моделях. ## Выводы Мы предложили GenPAS — универсальный фреймворк, который моделирует подготовку данных как стохастический процесс сбора пар входных-целевых данных. Этот подход дает лучшие результаты в генерировании рекомендаций и может быть использован в различных приложениях. Будущие исследования будут фокусироваться на улучшении применения GenPAS к реальным системам и его интеграции с другими методами подготовки данных.

## Контекст Современные короткометражные видеоплатформы, такие как TikTok и YouTube Shorts, генерируют огромные объемы данных, которые требуют эффективных методов анализа поведения пользователей для оптимизации рекомендательных систем. Необходимость улучшить качество рекомендаций и увеличить удовлетворенность пользователей возникла вследствие параллельного роста пользовательских международных данных и доступности мобильных устройств. Однако существуют сложности, связанные с нестабильными приоритетами пользователей, конкуренцией внимания и нерегулярностью поведения. Эти факторы сильно сказываются на качестве рекомендаций и моделировании поведения. Данное исследование будет ориентировано на развитие модели, которая может лучше предсказывать поведение пользователей и оптимизировать рекомендации в короткометражных видеосредах. ## Метод Для решения вышеперечисленных проблем вновь предлагается модель MT-DQN (Multimodal Temporal Deep Q-Network), которая стандартизирована на трех основных элементах: Transformer, Temporal Graph Neural Network (TGNN) и Deep Q-Network (DQN). Эта модель использует конкатенацию входных моделей для обработки множественных модальных данных. Таким образом, модель может более точно прогнозировать поведение пользователей и принятие решений в реальном времени. Для обучения используется метод Deep Q-learning, который оптимизирует стратегии рекомендации. Также в модели включена графическая сеть, которая позволяет лучше анализировать зависимости между пользователями и видео, обеспечивая более точную оценку влияния внешних факторов. ## Результаты Результаты экспериментов проведены на крупном наборе данных, содержащих данные о поведении пользователей на короткометражных видеоплатформах. Модель MT-DQN была сравнена с двумя типичными моделями: Vanilla-DQN и Concat-Modal. Модель MT-DQN демонстрирует значительные улучшения по сравнению с Vanilla-DQN, снижая среднеквадратичную и абсолютную ошибки (MSE и MAE) на 34.8% и 26.5% соответственно. Также MT-DQN превосходит Concat-Modal на 10.97% по F1-метрике и 8.3% по NDCG@5. Эти результаты показывают, что MT-DQN эффективно комбинирует несколько моделей, что приводит к более точным и лучше оптимизированным рекомендациям. ## Значимость Модель MT-DQN может быть применена в разных областях, включая рекомендательные системы, анализ поведения пользователей и машинное обучение с дополнением. Она предоставляет более точные прогнозы поведения пользователей, что может повысить качество рекомендаций и увеличить удовлетворенность пользователей. Также модель может быть использована для оптимизации рекламных кампаний и улучшения интерфейсов пользователей. Таким образом, MT-DQN представляет собой значительный