Comparative Analysis of GAN and Diffusion for MRI-to-CT translation

## Контекст Модели машинного обучения, обеспечивающие перевод между различными скантипами диагностических зонда, являются ключевыми для улучшения диагностических возможностей. Особенно это актуально в случае моделей, конвертирующих магнитно-резонансные изображения (MRI) в радиологически важные компьютерно-томографические (CT) снимки. Изображения CT широко используются в диагностике и лечении, однако их получение может быть затруднено из-за ограничений времени, оборудования или здоровья пациента. Создание прогностических моделей, которые могут генерировать CT-изображения из MRI, может решить эти проблемы. Однако существует необходимость в стандартной метрике для сравнения эффективности разных моделей. Целью данной работы является сравнение двух популярных моделей для MRI-to-CT перевода: генеративной сети противоположностей (cGAN) и диффузионной модели регулируемого размытия (cDDPM). ## Метод Для сравнительного анализа были выбраны две устаревшие, но проверенные модели: Pix2Pix для cGAN и Palette для cDDPM. Работа опиралась на существующие модели, чтобы гарантировать надежный анализ. Традиционный трехмерный перевод MRI-to-CT был сконцентрирован на последовательности 2D-переводов на горизонтальной плоскости (промежуточные трансверсальные срезы). Это позволило снизить вычислительную нагрузку и упростить моделирование. Кроме того, авторы исследовали влияние условного ввода на определенный срез MRI и на несколько срезов MRI. Метрики оценки включали новую slice-wise Similarity of Slices (SIMOS), которая оценивала устойчивость генерируемых изображений при сборке в 3D-формат. Это позволило измерить качество слэйсов, не только индивидуально, но и в целом. ## Результаты Результаты сравнения показали, что модель cDDPM (Palette) демонстрирует более высокую точность и последовательность срезов по сравнению с cGAN (Pix2Pix). С помощью SIMOS было выявлено, что использование нескольких срезов MRI в качестве условного ввода для cDDPM улучшает продолжительность и точность генерируемых изображений. Эти результаты подтверждают, что архитектура cDDPM более эффективна в MRI-to-CT переводе, особенно при использовании условного ввода с несколькими срезами. ## Значимость Результаты работы имеют значительное значение для области радиологии и диагностики. Эффективные методы перевода MRI-to-CT могут существенно сократить время диагностики и улучшить доступ к терапевтическим решениям. cDDPM может быть применено в различных случаях, например, когда CT-изображения отсутствуют или трудно получить. Помимо этого, исследование показывает возможность уменьшения вычислительных затрат за счет 2D-мо