AURAD: Anatomy-Pathology Unified Radiology Synthesis with Progressive Representations

2509.04819v2 eess.IV, cs.CV 2025-09-09
Авторы:

Shuhan Ding, Jingjing Fu, Yu Gu, Naiteek Sangani, Mu Wei, Paul Vozila, Nan Liu, Jiang Bian, Hoifung Poon

Резюме на русском

#### Контекст Medical image synthesis является ключевым подходом для увеличения размеров данных и улучшения общей модели в клинических сценариях с недостатком данных. Однако создание тонкой и контролируемой синтезированной сигнатуры остается сложной задачей из-за нехватки высококачественных аннотаций и сдвигов доменов между различными наборами данных. Традиционные методы, разработанные для естественных изображений или определенных типов опухолей, эффективно работают в ограниченных условиях, но не могут охватить различные морфологические модели болезней в радиологических изображениях, где патологии тесно взаимосвязаны с анатомическими структурами. Обратившись к этому вопросу, мы предлагаем AURAD — систему контролируемого синтеза рентгеновых изображений, которая эффективно решает эти проблемы. #### Метод AURAD — прогрессивная фреймворк, который синтезирует высококачественные рентгеновые изображения и псевдосегментационные маски. Метод использует клинические мотивационные стимулы, которые кондиционируют процесс генерации масок, чтобы получить максимальную диверсификацию и клиническую релевантность. Эта последовательная процедура состоит из двух этапов: на первом этапе маски генерируются из клинических запросов, а затем эти маски направляют процесс синтеза изображений. Мы также интегрируем экспертные модели медицинского анализа для фильтрации выходных данных, чтобы гарантировать их клиническую правдоподобность. Этот подход обеспечивает не только реалистичность визуального синтеза, но и создает полезные маски для сегментации и детекции в реальных задачах клинического применения. #### Результаты Мы провели серию экспериментов для оценки эффективности и генерализации нашего подхода. Результаты показали, что 78% синтезированных изображений были классифицированы как реальные борд-сертифицированными радиологами. Помимо этого, более 40% предсказанных сегментационных масок были оценены как клинически полезные. Эти результаты подтверждают высокую точность и значимость AURAD для реального клинического применения. #### Значимость AURAD может быть применен в различных клинических сценариях, где необходимо увеличение количества данных и повышение точности моделей. Его основные преимущества заключаются в высокой контролируемости, улучшенной реалистичности и связи с клиническими задачами. Этот подход может влиять на области, такие как диагностика, сегментация и классификация болезней, обеспечивая новые возможности для развития искусственного интеллекта в медицине. #### Выводы AURAD демонстрирует существенный прогресс в области контролируемого синтеза медицин

Abstract

Medical image synthesis has become an essential strategy for augmenting datasets and improving model generalization in data-scarce clinical settings. However, fine-grained and controllable synthesis remains difficult due to limited high-quality annotations and domain shifts across datasets. Existing methods, often designed for natural images or well-defined tumors, struggle to generalize to chest radiographs, where disease patterns are morphologically diverse and tightly intertwined with anatomical structures. To address these challenges, we propose AURAD, a controllable radiology synthesis framework that jointly generates high-fidelity chest X-rays and pseudo semantic masks. Unlike prior approaches that rely on randomly sampled masks-limiting diversity, controllability, and clinical relevance-our method learns to generate masks that capture multi-pathology coexistence and anatomical-pathological consistency. It follows a progressive pipeline: pseudo masks are first generated from clinical prompts conditioned on anatomical structures, and then used to guide image synthesis. We also leverage pretrained expert medical models to filter outputs and ensure clinical plausibility. Beyond visual realism, the synthesized masks also serve as labels for downstream tasks such as detection and segmentation, bridging the gap between generative modeling and real-world clinical applications. Extensive experiments and blinded radiologist evaluations demonstrate the effectiveness and generalizability of our method across tasks and datasets. In particular, 78% of our synthesized images are classified as authentic by board-certified radiologists, and over 40% of predicted segmentation overlays are rated as clinically useful. All code, pre-trained models, and the synthesized dataset will be released upon publication.

Ссылки и действия