Towards Strategic Persuasion with Language Models

Описание работы ================= ## Контекст Large language models (LLMs) становятся все более важными в области стратегического взаимодействия, в частности в области подтолкивания и конверсий. Эти модели показали способность сопоставиться с уровнем человеческой способности к убеждению. Однако существуют серьезные проблемы, связанные с измерением их эффективности в различных сферах. Многие попытки оценки эффективности LLMs основываются на неконтролируемых методах, что приводит к непоследовательности и неточности. В настоящей работе рассматривается новый подход к измерению эффективности LLMs, используя теоретический фреймворк Bayesian Persuasion (BP). Этот подход позволяет определить и измерить качество убеждения посредством стратегического взаимодействия, построенного на заранее определенных данных. ## Метод В этой работе предлагается фреймворк, основанный на теории Bayesian Persuasion, для измерения эффективности LLMs в стратегическом убеждении. Методология заключается в повторном использовании существующих наборов данных, полученных в условиях человеческого-человеческого взаимодействия. Эти данные преобразуются в среду, которая позволяет измерять точность убеждения LLMs. Основной инновацией является возможность адаптировать LLMs к различным стратегическим задачам с помощью теории BP. Фреймворк также включает в себя методы реинтеграции и оценки, которые позволяют измерять достигнутую эффективность. ## Результаты Исследования показали, что передовые модели LLMs достигают высоких результатов в убеждении, согласно теоретическим прогнозам. Было продемонстрировано, что граничные модели LLMs могут постоянно охватывать более высокие значения убеждения. Были выявлены сложные стратегии убеждения, которые работают даже в условиях малого количества данных. Также был проведен эксперимент с использованием reinforcement learning для обучения LLMs к стратегическому убеждению. Наблюдалось, что даже небольшие модели LLMs могут быть значительно улучшены при помощи reinforcement learning, достигая высоких результатов в стратегическом убеждении. ## Значимость Этот подход может быть применен в различных сферах, включая маркетинг, право, образование и медицину. Он может помочь улучшить узнаваемость и эффективность убеждения в стратегических задачах. Основные преимущества включают точную оценку качества убеждения, универсальность фреймворка и возможность применения к различным областям. В будущем могут быть рассмотрены расширения фреймворка для учета более сложных сред и улучшения методов интерпретирования результатов. ## Выводы В настоящей работе был предложен новый фреймворк для измер