YAC: Bridging Natural Language and Interactive Visual Exploration with Generative AI for Biomedical Data Discovery
2509.19182v1
cs.HC, cs.AI
2025-09-25
Авторы:
Devin Lange, Shanghua Gao, Pengwei Sui, Austen Money, Priya Misner, Marinka Zitnik, Nils Gehlenborg
Резюме на русском
## Контекст
Появление генерирующего искусственного интеллекта (Generative AI) открыло новые возможности для улучшения интерфейсов биомедицинского данных. Однако существующие проблемы в том, что полностью развитые пользовательские интерфейсы, использующие только технологии Генерирующего ИИ, не всегда способны обеспечить эффективное взаимодействие с пользователями. Элементы пользовательского интерфейса, такие как визуальные элементы и диалоговые окна, остаются важными для точного выявления информации. Существует значительная мотивация для разработки систем, которые могут объединить эти элементы с генерирующими моделями ИИ для более эффективного обнаружения и анализа данных в области биомедицины. Это влечет за собой задачу разработки интеллектуальных систем, которые могут генерировать структурированные ответы и адаптироваться к пользовательским запросам.
## Метод
YAC (Yet Another Chatbot) использует систему многоагентного подхода, где каждый агент отвечает за конкретную задачу. Одни агенты генерируют структурированные ответы, другие — визуализации. Данная система поддерживает лингвистические запросы, которые могут быть переведены на специальные команды, предназначенные для выполнения групповых задач. Интерактивные элементы, такие как фильтры и виджеты, интегрированы в систему для повышения удобства работы. Архитектура системы основывается на современных технологиях обработки естественного языка и визуального представления данных, что позволяет выполнять запросы в реальном времени и обеспечивать плавное взаимодействие пользователя с данными.
## Результаты
Проведенные эксперименты показали, что YAC может значительно повысить эффективность обработки данных в биомедицине. В ходе исследования использовались реальные биомедицинские наборы данных, что позволило проверить систему на реальных случаях. Результаты показали, что YAC может обрабатывать запросы с высокой точностью, а также адаптироваться к различным стилям ввода пользователем. Визуальные инструменты, такие как виджеты для редактирования параметров, демонстрировали высокую эффективность в управлении данными. Эти результаты подтвердили, что YAC может предложить новый подход к биомедицинским задачам.
## Значимость
Система YAC может использоваться в различных сферах биомедицины, включая диагностику, мониторинг и экспериментальный анализ. Одним из преимуществ является улучшение доступности информации за счет интеллектуального поиска и визуального представления. Эта система может стать основой для развития новых подходов в области генетики, биологии и медицины. Также
Abstract
Incorporating natural language input has the potential to improve the
capabilities of biomedical data discovery interfaces. However, user interface
elements and visualizations are still powerful tools for interacting with data,
even in the new world of generative AI. In our prototype system, YAC, Yet
Another Chatbot, we bridge the gap between natural language and interactive
visualizations by generating structured declarative output with a multi-agent
system and interpreting that output to render linked interactive visualizations
and apply data filters. Furthermore, we include widgets, which allow users to
adjust the values of that structured output through user interface elements. We
reflect on the capabilities and design of this system with an analysis of its
technical dimensions and illustrate the capabilities through four usage
scenarios.
Ссылки и действия
Дополнительные ресурсы: