A co-evolving agentic AI system for medical imaging analysis

2509.20279v1 cs.CV, q-bio.QM 2025-09-26
Авторы:

Songhao Li, Jonathan Xu, Tiancheng Bao, Yuxuan Liu, Yuchen Liu, Yihang Liu, Lilin Wang, Wenhui Lei, Sheng Wang, Yinuo Xu, Yan Cui, Jialu Yao, Shunsuke Koga, Zhi Huang

Резюме на русском

## Контекст В последние годы научные достижения в области искусственного интеллекта (AI) сильно влияли на развитие медицины, особенно в области медицинского изображения. Однако, несмотря на прогресс, использование agentic AI в медицинской обработке изображений сталкивается с рядовыми проблемами. Недостаток создания устойчивой системы, отсутствие современных инструментов и отсутствие реального времени для взаимодействия с экспертами становятся главными препятствиями. Эти ограничения снижают эффективность и принятие таких систем. Для преодоления этих проблем необходимо разработать современный, интерактивный подход, который бы поддерживал реальное время и мог бы быть адаптирован в реальном времени. Таким образом, был создан "TissueLab" — система, которая предлагает новый подход к решению этих вызовов. ## Метод "TissueLab" — это современная agentic AI система, которая предлагает новый подход к медицинской обработке изображений. Она позволяет экспертам задавать прямые вопросы, автоматически выстраивать рабочие процессы и проводить реального времени анализы. Эксперты могут в реальном времени просматривать промежуточные результаты и делать их исправления. Эта система включает несколько инструментов, охватывающих такие области, как патология, радиология и специальные генетические исследования. "TissueLab" стандартизирует входные данные, выходные результаты и возможности разных инструментов, чтобы определить, когда и как их использовать. Это делает систему особенно универсальной и эффективной в решении разнообразных задач. Алгоритмы системы постоянно учитывают вклад клиников, совершенствуя классификаторы и улучшая стратегии принятия решений. ## Результаты Набор экспериментов был проведен, чтобы оценить эффективность "TissueLab". Были использованы различные наборы данных, включая клинические изображения, которые позволяют конкретизировать задачи, которые система должна решать. Результаты показали, что "TissueLab" достигает государственного уровня в сравнении с другими методами, включая глубокие обученные модели, такие как VLMs и GPT-5. Особенно заметно была высокая точность в классификации заболеваний на ранних стадиях, а также в выделении подходящих лечебных рекомендаций. Эти результаты подтверждают высокую точность и надежность системы в медицинской обработке изображений. ## Значимость "TissueLab" может быть применено в различных областях, включая диагностику, прогнозирование и терапию медицинских заболеваний. Одним из основных преимуществ является возможность в реальном времени, что позволяет быстро получить результаты и принять необходимы

Abstract

Agentic AI is rapidly advancing in healthcare and biomedical research. However, in medical image analysis, their performance and adoption remain limited due to the lack of a robust ecosystem, insufficient toolsets, and the absence of real-time interactive expert feedback. Here we present "TissueLab", a co-evolving agentic AI system that allows researchers to ask direct questions, automatically plan and generate explainable workflows, and conduct real-time analyses where experts can visualize intermediate results and refine them. TissueLab integrates tool factories across pathology, radiology, and spatial omics domains. By standardizing inputs, outputs, and capabilities of diverse tools, the system determines when and how to invoke them to address research and clinical questions. Across diverse tasks with clinically meaningful quantifications that inform staging, prognosis, and treatment planning, TissueLab achieves state-of-the-art performance compared with end-to-end vision-language models (VLMs) and other agentic AI systems such as GPT-5. Moreover, TissueLab continuously learns from clinicians, evolving toward improved classifiers and more effective decision strategies. With active learning, it delivers accurate results in unseen disease contexts within minutes, without requiring massive datasets or prolonged retraining. Released as a sustainable open-source ecosystem, TissueLab aims to accelerate computational research and translational adoption in medical imaging while establishing a foundation for the next generation of medical AI.

Ссылки и действия