Computational Analysis of Conversation Dynamics through Participant Responsivity

2509.16464v1 cs.CL, cs.CY 2025-09-24
Авторы:

Margaret Hughes, Brandon Roy, Elinor Poole-Dayan, Deb Roy, Jad Kabbara

Резюме на русском

## Контекст В последние годы наблюдается рост литературы, посвященной характеристике токсичности и полиарности в дискурсе. Менее часто рассматривается вопрос о том, что делает диалог простолюдиным и конструктивным. Это исследование фокусируется на исследовании диалогического обмена и разработке метода, оценивающего его качество, основываясь на понятии "ответственности" — степень ответительности одного участника диалога к предыдущему участнику. Развитие таких методов имеет значительное значение для понимания качества дискурса и для создания инструментов, которые могут помочь улучшить процессы общения. ## Метод Для измерения ответственности использовались два подхода. В первом случае оценивалась семантическая схожесть между последовательными высказываниями участников. Второй подход основывался на использовании современных языковых моделей (LLM) для точной идентификации связи между высказываниями. Использовались опыты с полностью отмеченными наборами данных, чтобы протестировать эти подходы и выбрать наиболее эффективный. Далее, выбранный метод использовался для выявления типа ответа — является ли он значимым или бессмысленным. Это позволяет определить основные структуры диалога и выявить характеристики, отличающие конструктивные диалоги от нетактичных. ## Результаты В ходе экспериментов получены результаты, показавшие высокую точность определения ответственности. Легкость применения LLM-подхода дала более высокую точность по сравнению с методом семантической схожести. Изучены различные типы ответов: от незначительных до существенных. Отмечено, что доля существенных ответов в хорошо структурированных диалогах значительно выше. Эти результаты позволяют выделить основные характеристики конструктивных диалогов, такие как ответы на актуальные высказывания, и менее положительные признаки, такие как отвлеченные и незаинтересованные ответы. ## Значимость Результаты этого исследования могут быть применены в различных областях, таких как образование, технологии общения и социальные исследования. Улучшение понимания качества диалога может привести к разработке методов, которые будут поощрять более продуктивные дискуссии в социальных сетях, образовательных программах и дистанционных встречах. Это может помочь уменьшить токсичность в общении и повысить эффективность командных работ. Кроме того, с помощью разработанных метрик можно изучить диалоги в разных сферах, что даст новые возможности для анализа и моделирования различных типов дискурса. ## Выводы Основным достижением этого исследования является разработка метода определения ответствен

Abstract

Growing literature explores toxicity and polarization in discourse, with comparatively less work on characterizing what makes dialogue prosocial and constructive. We explore conversational discourse and investigate a method for characterizing its quality built upon the notion of ``responsivity'' -- whether one person's conversational turn is responding to a preceding turn. We develop and evaluate methods for quantifying responsivity -- first through semantic similarity of speaker turns, and second by leveraging state-of-the-art large language models (LLMs) to identify the relation between two speaker turns. We evaluate both methods against a ground truth set of human-annotated conversations. Furthermore, selecting the better performing LLM-based approach, we characterize the nature of the response -- whether it responded to that preceding turn in a substantive way or not. We view these responsivity links as a fundamental aspect of dialogue but note that conversations can exhibit significantly different responsivity structures. Accordingly, we then develop conversation-level derived metrics to address various aspects of conversational discourse. We use these derived metrics to explore other conversations and show that they support meaningful characterizations and differentiations across a diverse collection of conversations.

Ссылки и действия