Few-Shot and Training-Free Review Generation via Conversational Prompting

2509.20805v1 cs.CL, cs.IR 2025-09-27
Авторы:

Genki Kusano

Резюме на русском

#### Контекст Персонализированная генерация отзывов помогает компаниям понять предпочтения пользователей. Однако большинство существующих подходов требуют обширных историй отзывов пользователя или дополнительной модели для тренировки. На практике часто возникают ситуации, когда доступен только небольшой объем данных, и оптимизация модели невозможна. Известно, что крупные языковые модели (LLM) могут работать в таких условиях, но их эффективность зависит от того, насколько аккуратно проработано их воспроизведение. #### Метод В работе предлагается метод **Conversational Prompting**, который преобразует отзывы пользователей в многократные диалоги. Первый вариант, **Simple Conversational Prompting (SCP)**, использует только отзывы пользователя, в то время как второй непосредственный вариант, **Contrastive Conversational Prompting (CCP)**, включает отзывы других пользователей или LLM в качестве ответов, затем заставляет модель исправить их, чтобы создать текст в стиле пользователя. Эта методика используется для подготовки текста, который будет лучше отражать пользователя. #### Результаты Исследования проведены на 8 продуктовых категориях и 5 моделях LLM. Наиболее распространенная неконструктивная модель тенденции, чтобы производить отзывы, в основном похожи на текст, написанный случайным пользователем. Оценки на основе текста (например, ROUGE-L и BERTScore) и задачей пользовательской идентификации или анализа тональности показали, что текст, сгенерированный методом SCP и CCP, более точно отражает стиль каждого пользователя, даже если были доступны только два отзыва. Контрастивный подход CCP демонстрирует сногсшибательные улучшения при использовании высококачественных качественных отрицательных примеров, в то время как SCP оптимален при отсутствии такого данного. #### Значимость Исследования показали, что **Conversational Prompting** может обеспечить эффективное решение для генерации отзывов в контексте недостаточных данных и невозможности модели прикрепления. Этот подход может быть применен в реальных приложениях для понимания пользовательских предпочтений и создания качественных отзывов, даже при ограниченных ресурсах. #### Выводы Результаты показали, что **Simple Conversational Prompting** и **Contrastive Conversational Prompting** значительно повысили качество генерирования отзывов по сравнению с традиционными моделями. Будущие исследования будут направлены на улучшение методики и расширение ее приложений в других сферах генерации текста.

Abstract

Personalized review generation helps businesses understand user preferences, yet most existing approaches assume extensive review histories of the target user or require additional model training. Real-world applications often face few-shot and training-free situations, where only a few user reviews are available and fine-tuning is infeasible. It is well known that large language models (LLMs) can address such low-resource settings, but their effectiveness depends on prompt engineering. In this paper, we propose Conversational Prompting, a lightweight method that reformulates user reviews as multi-turn conversations. Its simple variant, Simple Conversational Prompting (SCP), relies solely on the user's own reviews, while the contrastive variant, Contrastive Conversational Prompting (CCP), inserts reviews from other users or LLMs as incorrect replies and then asks the model to correct them, encouraging the model to produce text in the user's style. Experiments on eight product domains and five LLMs showed that the conventional non-conversational prompt often produced reviews similar to those written by random users, based on text-based metrics such as ROUGE-L and BERTScore, and application-oriented tasks like user identity matching and sentiment analysis. In contrast, both SCP and CCP produced reviews much closer to those of the target user, even when each user had only two reviews. CCP brings further improvements when high-quality negative examples are available, whereas SCP remains competitive when such data cannot be collected. These results suggest that conversational prompting offers a practical solution for review generation under few-shot and training-free constraints.

Ссылки и действия