Dark Patterns Meet GUI Agents: LLM Agent Susceptibility to Manipulative Interfaces and the Role of Human Oversight

## Контекст Графические пользовательские интерфейсы (GUI) становятся все более интеллектуальными благодаря технологиям глубокого обучения и генерируемым с помощью лингвистических моделей (LLM). Эти технологии позволяют автоматизировать сложные задачи и увеличивают эффективность пользовательского опыта. Однако с другой стороны, GUI-agents могут стать жертвами "dark patterns" (девиаторных дизайнерских методов), которые способны манипулировать пользователями и вызвать негативные последствия для их решений и самодержавия. Несмотря на то, что существует значительное количество исследований по влиянию "dark patterns" на людей, мало что известно о том, как эти методы влияют на GUI-agents. Это создает необходимость в понимании того, как агенты машинного обучения отреагируют на эти методы, чтобы обеспечить безопасность, автономность и эффективность контроля за ними. ## Метод Для изучения этого вопроса была проведена двухфазная эмпирическая исследовательская работа. В первой фазе проведены эксперименты, в которых LLM-powered GUI-agents взаимодействовали с различными "dark patterns", а на второй – с участием человеческого участника. В качестве агентов использовались GUI-agents, которые автоматизировали различные задачи. Набор данных включал 16 различных типов "dark patterns", среди которых были различные типы ошибок в различных условиях и сценариях. Наблюдения включали в себя оценку производительности агентов, а также выявление ситуаций, когда они проваливались или успешно избегали манипуляций. ## Результаты Результаты экспериментов показали, что GUI-agents часто не в состоянии идентифицировать "dark patterns", даже когда они имеют возможность взаимодействовать с ними. В то же время, когда они распознали такие методы, они часто отдавали предпочтение выполнению задач, а не защите от мошенничества. Были выявлены различные формы провала: у людей – нарушение логики и ловушка привычного поведения, а у агентов – процедурные слепые пятна, когда они не могут учесть неожиданные манипуляции. Однако когда люди участвовали в командах с AI-agents, их помощь достигала усовершенствования результатов, хотя это приводило к стоимости в виде увеличения концентрации внимания и усилий на управление. ## Значимость Результаты этих исследований могут быть применены в различных областях, например, в сфере электронной коммерции, социальных медиа и других системах, где GUI-agents используются в качестве помощников. Выявленные риски открывают пути к разработке более транспарентных интерфейсов, а также развитию адаптивного контроля, позволяющего пользователю самостоятельно решать, какие задачи будут выполняться аг