Beyond Quality: Unlocking Diversity in Ad Headline Generation with Large Language Models

#### Контекст Генерация рекламных заголовков является ключевым элементом современной рекламы, где качество и разнообразие важны для привлечения разных аудиторий. Однако существующие подходы часто оптимизируют языковые модели только для качества или кликабельности (CTR), что приводит к повторяемости и низкому разнообразию рекламных заголовков. Эта проблема становится все более актуальной, так как разнообразие заголовков не только повышает интерес пользователей, но и повышает доход рекламодателей. Для решения этой проблемы нужен подход, который способен генерировать заголовки, при этом не упуская из виду качество и разнообразие. #### Метод Для решения проблемы разнообразия в генерации рекламных заголовков мы предлагаем DIVER — фреймворк, основанный на больших языковых моделях (LLMs). DIVER оптимизируется как для качества, так и для разнообразия. Мы разработали семантически и стилистически ориентированный процесс порождения данных, который автоматически сгенерировал пары высококачественных тренировочных примеров с рекламным контентом и множеством разнообразных заголовков. Для достижения цели генерирования качественных и разнообразных заголовков в одном проходе мы предлагаем фреймворк, основанный на многоэтапной оптимизации с многообъективным подходом. Мы применяем супервизованное шагувание (SFT) и быстродействующую оптимизацию с помощью системы на основе награды (RL). Это позволяет генерировать разнообразные заголовки с высоким качеством в рамках одного прохода модели. #### Результаты Мы провели эксперименты на реальных индустриальных данных, чтобы проверить эффективность DIVER. Наши результаты показали, что DIVER эффективно сбалансировал качество и разнообразие заголовков. Мы проанализировали их влияние на CTR и ADVV (рекламодательскую важность). Результаты показали, что DIVER повысил CTR на 1.4% и ADVV на 4.0%, что демонстрирует преимущества нашего подхода в улучшении рекламных результатов. #### Значимость Предложенный подход DIVER имеет широкое применение в рекламных системах, где ключевым приоритетом является достижение баланса между качеством и разнообразием заголовков. Это позволяет увеличить кликабельность, повысить интерес пользователей и улучшить рекламный бизнес. Этот подход может быть также применен в других областях, где важно разнообразие генерируемого контента, таких как создание новостных рубрик, содержание социальных сетей и других типов рекламного контента. #### Выводы Мы представили DIVER — новый подход для генерирования рекламных заголовков, который эффективно сбалансировал качество и разнообразие. Результаты экспериментов показали, что DIVER может