Diffusion-based Multi-modal Synergy Interest Network for Click-through Rate Prediction
2508.21460v1
cs.IR, cs.AI
2025-09-02
Авторы:
Xiaoxi Cui, Weihai Lu, Yu Tong, Yiheng Li, Zhejun Zhao
Резюме на русском
#### Контекст
Клик-тру рэйт (CTR) предсказание — ключевая задача в рекомендательных системах, которая стремится предсказать вероятность того, что пользователь щелкнет рекомендованный элемент. Основные методы CTR предсказания опираются на ID-модальность, но это недостаточно для полного охвата многообразных предпочтений пользователей. Многомодальное CTR-предсказание позволяет лучше учитывать различные аспекты пользовательских предпочтений, такие как текст, картинки и видео. Однако существующие методы многомодального фузирования часто не эффективно разделяют общие и специфичные черты каждой модальности и не учитывают синергетические эффекты между ними, что ограничивает их эффективность.
#### Метод
Мы предлагаем Diffusion-based Multi-modal Synergy Interest Network (Diff-MSIN) — рамочное решение для CTR-предсказания, основанное на методе диффузии. Основные модули фреймворка: Multi-modal Feature Enhancement (MFE), Synergistic Relationship Capture (SRC) и Feature Dynamic Adaptive Fusion (FDAF). MFE и SRC извлекают общие и специфичные черты каждой модальности, улучшая представление модальностей. Knowledge Decoupling метод используется для увеличения различий между фичами. FDAF акцентируется на снижении шума во время фузирования и усилении представления пользовательских предпочтений.
#### Результаты
Мы провели тщательные эксперименты на двух наборах данных: Rec-Tmall и трех Amazon-датасетах. В сравнении с базовыми моделями, Diff-MSIN демонстрирует существенные улучшения, с увеличением CTR на 1.67% и более. Эти результаты подтверждают высокую эффективность Diff-MSIN в моделировании многомодальных предпочтений пользователей и повышении точности CTR-предсказания.
#### Значимость
Предлагаемая модель может применяться в различных сценариях многомодального рекомендательного пространства, включая коммерческие платформы, социальные сети и игровые платформы. Diff-MSIN выделяется своей способностью эффективно объединять многомодальные данные, уменьшая шум и усиления релевантных черт. Это приносит повышенную точность, что может положительно сказаться на пользовательском опыте и доходами систем.
#### Выводы
Diff-MSIN достигает высокой точности в CTR-предсказании, опережая базовые модели на значительном расстоянии. Мы планируем продолжать развивать нашу модель, сконцентрировавшись на улучшении модулей и исследовании новых стратегий многомодального фузирования. Исходный код модели доступен по ссылке: [https://github.com/Cxx-0/Diff-MSIN](https://github.com/Cxx-0/Diff-MSIN).
Abstract
In click-through rate prediction, click-through rate prediction is used to
model users' interests. However, most of the existing CTR prediction methods
are mainly based on the ID modality. As a result, they are unable to
comprehensively model users' multi-modal preferences. Therefore, it is
necessary to introduce multi-modal CTR prediction. Although it seems appealing
to directly apply the existing multi-modal fusion methods to click-through rate
prediction models, these methods (1) fail to effectively disentangle
commonalities and specificities across different modalities; (2) fail to
consider the synergistic effects between modalities and model the complex
interactions between modalities.
To address the above issues, this paper proposes the Diffusion-based
Multi-modal Synergy Interest Network (Diff-MSIN) framework for click-through
prediction. This framework introduces three innovative modules: the Multi-modal
Feature Enhancement (MFE) Module Synergistic Relationship Capture (SRC) Module,
and the Feature Dynamic Adaptive Fusion (FDAF) Module. The MFE Module and SRC
Module extract synergistic, common, and special information among different
modalities. They effectively enhances the representation of the modalities,
improving the overall quality of the fusion. To encourage distinctiveness among
different features, we design a Knowledge Decoupling method. Additionally, the
FDAF Module focuses on capturing user preferences and reducing fusion noise. To
validate the effectiveness of the Diff-MSIN framework, we conducted extensive
experiments using the Rec-Tmall and three Amazon datasets. The results
demonstrate that our approach yields a significant improvement of at least
1.67% compared to the baseline, highlighting its potential for enhancing
multi-modal recommendation systems. Our code is available at the following
link: https://github.com/Cxx-0/Diff-MSIN.
Ссылки и действия
Дополнительные ресурсы: