EGRA:Toward Enhanced Behavior Graphs and Representation Alignment for Multimodal Recommendation

#### Контекст MultiModal Recommendation (MMR) системы представляют собой мощный подход к улучшению рекомендательных систем, используя богатые модальности содержимого товаров или услуг. Они поддерживаются значительным ростом в области компьютерного зрения, естественного языка и многих других технологий. Однако существуют критические проблемы. Первую связано с использованием необработанных модальных признаков для построения связей между элементами в поведенческих графах, что приводит к склонности к шуму и ограниченной учету коллаборативных паттернов. Вторая проблема заключается в неэффективном использовании механизмов корреляции модальности и поведения, из-за чего недостаточно усилены модальность-поведение корреляционные связи. Таким образом, необходимо разработать новые методы для облегчения этих ограничений. #### Метод Мы предлагаем EGRA (Enhanced Graph Representation Alignment), которая построена на двух ключевых инновациях. Во-первых, вместо непосредственного использования необработанных модальных признаков, EGRA создает поведенческий граф с помощью представлений, полученных от предобученной модели MMR. Это позволяет графу лучше отражать коллаборативные модели и модальные семантики, а также снизить шум. Во-вторых, EGRA вводит динамическую механику двухуровневого взвешивания связей, которая адаптивно регулирует силу связи в зависимости от ее уровня аллигации, при этом увеличивается общая сила связи в процессе обучения. #### Результаты Мы провели эксперименты на пяти различных датасетах, включая Amazon, Douban и MovieLens. Результаты показывают, что EGRA превосходит новейшие методы по метрикам Precision, Recall и NDCG. Этот улучшение доказывает ее эффективность в улучшении точности и стабильности рекомендаций. Более того, было проведено чувствительностное исследование, подтвердившее, что индивидуальные компоненты EGRA (например, динамическое взвешивание и построение графа) способствуют повышению качества рекомендаций. #### Значимость EGRA может применяться в различных рекомендательных системах, таких как покупки, видеопотоковые сервисы и другие области, где необходима сильная пользовательская сегментация и индивидуализация рекомендаций. Она предлагает преимущества в сокращении шума, улучшении точности и более устойчивой модальности-поведение аллигации. Будущие исследования будут сконцентрированы на экспандирующих EGRA для пользовательских поведенческих графов и интегрируя ее в более широкие системы рекомендаций. #### Выводы EGRA представляет собой прорыв в области модальности-поведение графов и доказывает ее эффективность в решении ключевых проблем MMR. Будущие работы буду