SLaM-DiMM: Shared Latent Modeling for Diffusion Based Missing Modality Synthesis in MRI

## Контекст В области медицинского изображения, четыре модальности МРТ (T1w, T1ce, T2w и Flair) широко используются для анализа биологической анатомии мозга. Эти модальности дополняют друг друга, обеспечивая богатые детали и характеристики, необходимые для точных диагностических задач. Однако не всегда все модальности могут быть доступны, из-за отсутствия одной из них во время получения изображений, сбоя оборудования или других причин. Это ставит перед исследователями задачу порождения отсутствующих модальностей. Несмотря на то, что существуют методы, такие как генеративные модели, они часто страдают от артефактов или несогласованности структуры. Обоснованность и эффективность новых подходов в этой области могут существенно влиять на повышение точности диагностики и улучшение клинических результатов. ## Метод Мы предлагаем SLaM-DiMM (Shared Latent Modeling for Diffusion-Based Missing Modality Synthesis in MRI), новую модель, основанную на моделях размерности и диффузионных моделях. Модель вводит систему координат, которая делит модальности на группы, чтобы улучшить понимание зависимостей и корреляций. Мы используем диффузионные модели для порождения отсутствующих модальностей, что позволяет сохранять контекст и геометрическую точность. Для обеспечения структурного согласования внутри глубины трехмерных объектов, мы вводим механизм координации глубины, который улучшает консистентность сильно различных модальностей. Модель обучается на большом количестве данных с разными модальностями для обучения наиболее гибкой и универсальной модели. ## Результаты Мы проводили эксперименты на BraTS-Lighthouse-2025 Challenge dataset, где SLaM-DiMM показала значительное превосходство в сравнении с другими подходами. Мы использовали объемные данные, включающие различные клинические ситуации, для тщательного сравнения. Для качественного анализа, мы вывели результаты по каждой модальности. Также, мы визуализировали интенсивность, точность координат и структурные детали. Количественные метрики, такие как SSIM и PSNR, показали лучшие результаты SLaM-DiMM по сравнению с конкурентными моделями. ## Значимость Предложенный подход имеет широкие области применения в медицинской изображейной обработке. Он может быть использован в задачах порождения отсутствующих модальностей, анализе необычных проявлений и диагностике аномалий в мозге. Основные преимущества SLaM-DiMM заключаются в том, что он обеспечивает высокую точность и структурную консистентность, что может повысить качество диагностических моделей. Мы предполагаем, что наши разработки смогут способствовать развитию новых к