Beyond Pixels: Medical Image Quality Assessment with Implicit Neural Representations

2508.05168v1 eess.IV, cs.CV 2025-08-09
Авторы:

Caner Özer, Patryk Rygiel, Bram de Wilde, İlkay Öksüz, Jelmer M. Wolterink

Резюме на русском

Артефакты в медицинских изображениях значительно снижают точность диагностики и сокращают качество анализа данных. Обычные методы обнаружения артефактов часто приводят к убытку информации и требуют большой памяти, что ограничивает модели классификации в своей масштабируемости. В этой работе предлагается использовать алгоритмы implicit neural representations (INRs) для оценки качества медицинских изображений. INRs представляют изображения в виде непрерывных данных, что позволяет легко адаптироваться к разным разрешениям и объемам, уменьшая необходимую память. Мы разработали нейронные сети, основанные на весах и графах, а также трансформеры с относительной аттенцией, чтобы использовать INRs для оценки качества изображений. На датасете ACDC, на котором виртуально генерируются артефакты, наш метод продемонстрировал высокую эффективность при оценке качества, при этом требуя меньше параметров.

Abstract

Artifacts pose a significant challenge in medical imaging, impacting diagnostic accuracy and downstream analysis. While image-based approaches for detecting artifacts can be effective, they often rely on preprocessing methods that can lead to information loss and high-memory-demand medical images, thereby limiting the scalability of classification models. In this work, we propose the use of implicit neural representations (INRs) for image quality assessment. INRs provide a compact and continuous representation of medical images, naturally handling variations in resolution and image size while reducing memory overhead. We develop deep weight space networks, graph neural networks, and relational attention transformers that operate on INRs to achieve image quality assessment. Our method is evaluated on the ACDC dataset with synthetically generated artifact patterns, demonstrating its effectiveness in assessing image quality while achieving similar performance with fewer parameters.

Ссылки и действия