Vibe Check: Understanding the Effects of LLM-Based Conversational Agents' Personality and Alignment on User Perceptions in Goal-Oriented Tasks
2509.09870v1
cs.HC, cs.AI, cs.CL
2025-09-16
Авторы:
Hasibur Rahman, Smit Desai
Резюме на русском
## Контекст
В последние годы технологии л LLM (large language models) позволяют создавать более интерактивные и естественные диалоги с роботами-консультантами (CAs). Эти роботы могут выражать различные персональности, что открывает новые возможности для улучшения пользовательских взаимодействий. Однако новые вопросы возникают относительно того, как различные уровни выражения персональности влияют на ощущения пользователей и удовлетворенность от этих взаимодействий. Интересным вопросом является, как уровень выражения персональности и ее согласованность с ожиданиями пользователей могут повлиять на результаты в целевых задачах.
## Метод
Для изучения этих вопросов был проведен эксперимент типа between-subjects с участием 150 человек. Участники выполняли задачи планирования путешествий, взаимодействуя с роботами-консультантами, имеющими разные характеристики личности. Личность была регулирована с помощью **Trait Modulation Keys** — системы, регулирующей выражение шести типичных личностных признаков (тест Big Five Inventory). Уровень выражения личности варьировался от низкого до высокого, что позволило изучить пользовательские ощущения в зависимости от уровня выражения личности и ее соответствия ожиданиям пользователя.
## Результаты
Результаты эксперимента показали, что роботы-консультанты с средним уровнем выражения личности получили самые положительные оценки от пользователей в течение целевых задач. Этот результат был замечен в тех областях, как удовлетворенность от взаимодействия, антропоморфизм, ценность персональности, доверие и желание использовать такого робота в будущем. Наивысшие результаты были получены роботами с средним уровнем выражения личности в сравнении с низким и высоким уровнями выражения. Было также обнаружено, что личностные характеристики, такие как экстраверсия и стабильность эмоций, оказывают сильнейшее воздействие на персональность и удовлетворенность от взаимодействия.
## Значимость
Находки данного исследования имеют значительное значение для развития технологий личности в крупных лингвистических моделях. Они показывают, что выбор оптимального уровня выражения личности и ее согласованность с ожиданиями пользователя могут существенно улучшить результаты в задачах, где ключевой роль играет пользовательское взаимодействие. Такие результаты могут быть применены в различных областях, таких как поддержка клиентов, обучение, психологические услуги и другие сферы, где роботы-консультанты играют важную роль.
## Выводы
Результаты этого исследования подтверждают, что уровень выражения личности и ее согласованность с ожиданиями по
Abstract
Large language models (LLMs) enable conversational agents (CAs) to express
distinctive personalities, raising new questions about how such designs shape
user perceptions. This study investigates how personality expression levels and
user-agent personality alignment influence perceptions in goal-oriented tasks.
In a between-subjects experiment (N=150), participants completed travel
planning with CAs exhibiting low, medium, or high expression across the Big
Five traits, controlled via our novel Trait Modulation Keys framework. Results
revealed an inverted-U relationship: medium expression produced the most
positive evaluations across Intelligence, Enjoyment, Anthropomorphism,
Intention to Adopt, Trust, and Likeability, significantly outperforming both
extremes. Personality alignment further enhanced outcomes, with Extraversion
and Emotional Stability emerging as the most influential traits. Cluster
analysis identified three distinct compatibility profiles, with "Well-Aligned"
users reporting substantially positive perceptions. These findings demonstrate
that personality expression and strategic trait alignment constitute optimal
design targets for CA personality, offering design implications as LLM-based
CAs become increasingly prevalent.
Ссылки и действия
Дополнительные ресурсы: