AURAD: Anatomy-Pathology Unified Radiology Synthesis with Progressive Representations
2509.04819v2
eess.IV, cs.CV
2025-09-09
Авторы:
Shuhan Ding, Jingjing Fu, Yu Gu, Naiteek Sangani, Mu Wei, Paul Vozila, Nan Liu, Jiang Bian, Hoifung Poon
Резюме на русском
#### Контекст
Medical image synthesis является ключевым подходом для увеличения размеров данных и улучшения общей модели в клинических сценариях с недостатком данных. Однако создание тонкой и контролируемой синтезированной сигнатуры остается сложной задачей из-за нехватки высококачественных аннотаций и сдвигов доменов между различными наборами данных. Традиционные методы, разработанные для естественных изображений или определенных типов опухолей, эффективно работают в ограниченных условиях, но не могут охватить различные морфологические модели болезней в радиологических изображениях, где патологии тесно взаимосвязаны с анатомическими структурами. Обратившись к этому вопросу, мы предлагаем AURAD — систему контролируемого синтеза рентгеновых изображений, которая эффективно решает эти проблемы.
#### Метод
AURAD — прогрессивная фреймворк, который синтезирует высококачественные рентгеновые изображения и псевдосегментационные маски. Метод использует клинические мотивационные стимулы, которые кондиционируют процесс генерации масок, чтобы получить максимальную диверсификацию и клиническую релевантность. Эта последовательная процедура состоит из двух этапов: на первом этапе маски генерируются из клинических запросов, а затем эти маски направляют процесс синтеза изображений. Мы также интегрируем экспертные модели медицинского анализа для фильтрации выходных данных, чтобы гарантировать их клиническую правдоподобность. Этот подход обеспечивает не только реалистичность визуального синтеза, но и создает полезные маски для сегментации и детекции в реальных задачах клинического применения.
#### Результаты
Мы провели серию экспериментов для оценки эффективности и генерализации нашего подхода. Результаты показали, что 78% синтезированных изображений были классифицированы как реальные борд-сертифицированными радиологами. Помимо этого, более 40% предсказанных сегментационных масок были оценены как клинически полезные. Эти результаты подтверждают высокую точность и значимость AURAD для реального клинического применения.
#### Значимость
AURAD может быть применен в различных клинических сценариях, где необходимо увеличение количества данных и повышение точности моделей. Его основные преимущества заключаются в высокой контролируемости, улучшенной реалистичности и связи с клиническими задачами. Этот подход может влиять на области, такие как диагностика, сегментация и классификация болезней, обеспечивая новые возможности для развития искусственного интеллекта в медицине.
#### Выводы
AURAD демонстрирует существенный прогресс в области контролируемого синтеза медицин
Abstract
Medical image synthesis has become an essential strategy for augmenting
datasets and improving model generalization in data-scarce clinical settings.
However, fine-grained and controllable synthesis remains difficult due to
limited high-quality annotations and domain shifts across datasets. Existing
methods, often designed for natural images or well-defined tumors, struggle to
generalize to chest radiographs, where disease patterns are morphologically
diverse and tightly intertwined with anatomical structures. To address these
challenges, we propose AURAD, a controllable radiology synthesis framework that
jointly generates high-fidelity chest X-rays and pseudo semantic masks. Unlike
prior approaches that rely on randomly sampled masks-limiting diversity,
controllability, and clinical relevance-our method learns to generate masks
that capture multi-pathology coexistence and anatomical-pathological
consistency. It follows a progressive pipeline: pseudo masks are first
generated from clinical prompts conditioned on anatomical structures, and then
used to guide image synthesis. We also leverage pretrained expert medical
models to filter outputs and ensure clinical plausibility. Beyond visual
realism, the synthesized masks also serve as labels for downstream tasks such
as detection and segmentation, bridging the gap between generative modeling and
real-world clinical applications. Extensive experiments and blinded radiologist
evaluations demonstrate the effectiveness and generalizability of our method
across tasks and datasets. In particular, 78% of our synthesized images are
classified as authentic by board-certified radiologists, and over 40% of
predicted segmentation overlays are rated as clinically useful. All code,
pre-trained models, and the synthesized dataset will be released upon
publication.
Ссылки и действия
Дополнительные ресурсы: