Can AI Explanations Make You Change Your Mind?

2508.08158v1 cs.HC, cs.AI 2025-08-13
Авторы:

Laura Spillner, Rachel Ringe, Robert Porzel, Rainer Malaka

Резюме на русском

#### Контекст В сфере AI-based decision support systems (DSS), объяснения играют ключевую роль в помощи пользователям определять, когда доверять рекомендациям системы и когда их следует скептически относиться. Это позволяет обеспечить человеческий контроль, способный предотвратить ошибки и биазы в решениях AI. Однако этот подход основывается на предположении, что пользователи будут тщательно рассматривать объяснения, чтобы выявить возможные неточности. Однако наше исследование показало, что многие участники проведенного нами онлайн-опроса тратили мало времени на изучение объяснений и не всегда их тщательно проанализировали. Мы приводим эксплорейтивный анализ этого данных, стремящийся выяснить, какие факторы влияют на то, насколько тщательно пользователи рассматривают объяснения AI, и как это влияет на их готовность изменить мнение на основе рекомендаций AI. #### Метод Мы провели онлайн-исследование, в котором участники выполняли задачи с использованием AI-поддерживаемых DSS. Объяснения были представлены в различных формах, включая текстовые, визуальные и сочетания этих форм. Участники просили рассказать о своем уровне доверия к рекомендациям AI и о том, насколько они готовы изменить свое мнение на основе этих объяснений. Мы также измеряли время, затраченное на изучение объяснений, а также проводили тесты для определения визуальной и когнитивной нагрузки. Данные были проанализированы с помощью статистических методов, чтобы выявить зависимости между различными факторами и откликом пользователей. #### Результаты Наши результаты показали, что некоторые факторы, такие как тип объяснения и нагрузка на визуальную систему, оказывают значительное влияние на количество времени, затраченное пользователями на изучение объяснений. Мы также обнаружили, что те, кто тратил больше времени на изучение объяснений, более готовы менять свое мнение на основе рекомендаций AI. Тем не менее, некоторые участники продолжали придерживаться своих предварительных мнений, даже при доступе к подробным объяснениям. Это отражается в том, что определенные типы объяснений оказывают более сильное влияние на некоторых участников, чем на других. #### Значимость Наши результаты имеют значительное значение для разработки эффективных AI-поддерживаемых DSS. Они отражают необходимость в создании более привлекательных и интересных объяснений, чтобы повысить внимание пользователей. Эти преимущества могут быть применены в различных сферах, включая здравоохранение, финансы и управление, где важно сохранять человеческий контроль над решениями AI. Более широкое применение таких подходов может привести к улучшению качества решений и уменьшению

Abstract

In the context of AI-based decision support systems, explanations can help users to judge when to trust the AI's suggestion, and when to question it. In this way, human oversight can prevent AI errors and biased decision-making. However, this rests on the assumption that users will consider explanations in enough detail to be able to catch such errors. We conducted an online study on trust in explainable DSS, and were surprised to find that in many cases, participants spent little time on the explanation and did not always consider it in detail. We present an exploratory analysis of this data, investigating what factors impact how carefully study participants consider AI explanations, and how this in turn impacts whether they are open to changing their mind based on what the AI suggests.

Ссылки и действия