Facilitating Longitudinal Interaction Studies of AI Systems

2508.10252v1 cs.HC, cs.AI, cs.CY 2025-08-16
Авторы:

Tao Long, Sitong Wang, Émilie Fabre, Tony Wang, Anup Sathya, Jason Wu, Savvas Petridis, Dingzeyu Li, Tuhin Chakrabarty, Yue Jiang, Jingyi Li, Tiffany Tseng, Ken Nakagaki, Qian Yang, Nikolas Martelaro, Jeffrey V. Nickerson, Lydia B. Chilton

Резюме на русском

## Контекст Универсальные системы пользовательского интерфейса (UIST) широко используются для решения различных задач, включая работу с данными, коммуникацию, игры и творчество. Со временем, пользователи настраивают эти системы, изменяют их функционал, создают новые решения и присваивают им новые значения. Таким образом, системы UIST становятся важной частью повседневного жизнеспособного интеллекта. Однако существуют трудности при оценке и изучении этих систем в динамике, так как одиночные эксперименты не могут полностью отразить их динамическое развитие и адаптацию. Необходимы методы, позволяющие проводить длительные исследования, чтобы лучше понять и улучшить взаимодействие с пользователями в течение продолжительного времени. ## Метод Для решения этих проблем разработаны новые методики, позволяющие проводить длительные исследования, отслеживая изменения поведения систем UIST в реальном времени. Это включает в себя развитие инструментов для сбора данных, анализа и оценки динамических изменений в поведении систем. Методы основываются на учете истории взаимодействия пользователей, анализе изменений в их потребностях и внедрения адаптивных механизмов. Эти инструменты развиваются с учетом потребностей разных групп пользователей и индивидуальных особенностей. ## Результаты На основе разработанной методики проводились эксперименты, в ходе которых был изучен динамический процесс взаимодействия пользователей с UIST. Были оценены различные сценарии применения, включая работу с данными, управление и творческие задачи. Изученные данные позволили выявить тенденции в изменении поведения пользователей, определить факторы, влияющие на эффективность взаимодействия, и разработать рекомендации для улучшения систем. Таким образом, исследования позволили получить новые знания о динамике взаимодействия пользователей с UIST и подготовить основу для дальнейших разработок. ## Значимость Результаты имеют значительное значение для развития UIST в сферах, где необходимо учитывать динамические изменения пользовательского поведения. Это могут быть применения в области управления, здравоохранения, образования и творческих профессий. Плюсы такого подхода заключаются в том, что он позволяет разрабатывать более эффективные и понятные системы, улучшая качество интерфейсов и увеличивая удобство для пользователей. Будущие исследования будут сконцентрированы на дальнейшем изучении динамических систем, а также на продвижении методик для других областей, где взаимодействие с пользователями требует длительного мониторинга и адаптации. ## Выводы Данное исследовани

Abstract

UIST researchers develop tools to address user challenges. However, user interactions with AI evolve over time through learning, adaptation, and repurposing, making one time evaluations insufficient. Capturing these dynamics requires longer-term studies, but challenges in deployment, evaluation design, and data collection have made such longitudinal research difficult to implement. Our workshop aims to tackle these challenges and prepare researchers with practical strategies for longitudinal studies. The workshop includes a keynote, panel discussions, and interactive breakout groups for discussion and hands-on protocol design and tool prototyping sessions. We seek to foster a community around longitudinal system research and promote it as a more embraced method for designing, building, and evaluating UIST tools.

Ссылки и действия