Few-Shot and Training-Free Review Generation via Conversational Prompting
2509.20805v1
cs.CL, cs.IR
2025-09-27
Авторы:
Genki Kusano
Резюме на русском
#### Контекст
Персонализированная генерация отзывов помогает компаниям понять предпочтения пользователей. Однако большинство существующих подходов требуют обширных историй отзывов пользователя или дополнительной модели для тренировки. На практике часто возникают ситуации, когда доступен только небольшой объем данных, и оптимизация модели невозможна. Известно, что крупные языковые модели (LLM) могут работать в таких условиях, но их эффективность зависит от того, насколько аккуратно проработано их воспроизведение.
#### Метод
В работе предлагается метод **Conversational Prompting**, который преобразует отзывы пользователей в многократные диалоги. Первый вариант, **Simple Conversational Prompting (SCP)**, использует только отзывы пользователя, в то время как второй непосредственный вариант, **Contrastive Conversational Prompting (CCP)**, включает отзывы других пользователей или LLM в качестве ответов, затем заставляет модель исправить их, чтобы создать текст в стиле пользователя. Эта методика используется для подготовки текста, который будет лучше отражать пользователя.
#### Результаты
Исследования проведены на 8 продуктовых категориях и 5 моделях LLM. Наиболее распространенная неконструктивная модель тенденции, чтобы производить отзывы, в основном похожи на текст, написанный случайным пользователем. Оценки на основе текста (например, ROUGE-L и BERTScore) и задачей пользовательской идентификации или анализа тональности показали, что текст, сгенерированный методом SCP и CCP, более точно отражает стиль каждого пользователя, даже если были доступны только два отзыва. Контрастивный подход CCP демонстрирует сногсшибательные улучшения при использовании высококачественных качественных отрицательных примеров, в то время как SCP оптимален при отсутствии такого данного.
#### Значимость
Исследования показали, что **Conversational Prompting** может обеспечить эффективное решение для генерации отзывов в контексте недостаточных данных и невозможности модели прикрепления. Этот подход может быть применен в реальных приложениях для понимания пользовательских предпочтений и создания качественных отзывов, даже при ограниченных ресурсах.
#### Выводы
Результаты показали, что **Simple Conversational Prompting** и **Contrastive Conversational Prompting** значительно повысили качество генерирования отзывов по сравнению с традиционными моделями. Будущие исследования будут направлены на улучшение методики и расширение ее приложений в других сферах генерации текста.
Abstract
Personalized review generation helps businesses understand user preferences,
yet most existing approaches assume extensive review histories of the target
user or require additional model training. Real-world applications often face
few-shot and training-free situations, where only a few user reviews are
available and fine-tuning is infeasible. It is well known that large language
models (LLMs) can address such low-resource settings, but their effectiveness
depends on prompt engineering. In this paper, we propose Conversational
Prompting, a lightweight method that reformulates user reviews as multi-turn
conversations. Its simple variant, Simple Conversational Prompting (SCP),
relies solely on the user's own reviews, while the contrastive variant,
Contrastive Conversational Prompting (CCP), inserts reviews from other users or
LLMs as incorrect replies and then asks the model to correct them, encouraging
the model to produce text in the user's style. Experiments on eight product
domains and five LLMs showed that the conventional non-conversational prompt
often produced reviews similar to those written by random users, based on
text-based metrics such as ROUGE-L and BERTScore, and application-oriented
tasks like user identity matching and sentiment analysis. In contrast, both SCP
and CCP produced reviews much closer to those of the target user, even when
each user had only two reviews. CCP brings further improvements when
high-quality negative examples are available, whereas SCP remains competitive
when such data cannot be collected. These results suggest that conversational
prompting offers a practical solution for review generation under few-shot and
training-free constraints.
Ссылки и действия
Дополнительные ресурсы: