Multimodal Sheaf-based Network for Glioblastoma Molecular Subtype Prediction

## Контекст Glioblastoma — опухоль крайне высокой выраженности, развивающаяся в мозгу с повышенной скоростью перераспространения. Она является одной из самых тяжелых и роковых видов опухолей мозга. Раннее и точное определение молекулярных подтипов glioblastoma не только повышает шансы на выживание пациентов, но и позволяет выбрать эффективную целевую терапию. Однако, сегодняшние методы классификации молекулярных подтипов этой опухоли в основном основываются на инвазивном извлечении и анализе ткани, что требует дорогостоящих и временно затратных процедур. Это способствует развитию интереса к методам виртуального биопсии, которые могут обеспечить быстрый и точный диагноз без необходимости инвазивных методов. Несмотря на развитие методов многомодального анализа, существующие подходы, комбинирующие MRI и изображения гистопатологического материала, имеют ограниченности и недостаточно эффективны в условиях отсутствия данных или их неполноте. ## Метод Мы предлагаем новую модель — Multimodal Sheaf-based Network (MMSN) — основанную на концепции множественных модальностей и графовых структур. Фреймворк призван решить проблему несогласованности и неполноты данных, связанную с многомодальным подходом к классификации. Наше решение включает: - **Построение многомодальных графов**, где вершины представляют регионы мозга, а ребра — связи между ними; - **Использование конструкции святой книги (sheaf)** для гарантии локальной и глобальной консистентности данных; - **Процедуры восстановления данных**, позволяющие учесть отсутствующие или неполные модальности; - **Многоуровневый фильтрационный механизм** для сохранения дискриминативных особенностей в графах. ## Результаты Мы провели эксперименты на реальных данных с классификацией молекулярных подтипов glioblastoma. Модель MMSN была сравнена с основными алгоритмами, такими как graph convolutional networks и multimodal graph attention networks. Результаты показали, что MMSN: - Обеспечивает более высокую точность классификации, особенно в условиях отсутствия или неполноты данных; - Эффективно интегрирует информацию из MRI и гистопатологических изображений; - Показывает высокую устойчивость при обработке нестандартных ситуаций, таких как удаление ребер или модальностей. ## Значимость Разрабатываемый подход имеет широкие приложения в медицине, в том числе для виртуального биопсии, улучшения диагностики и выбора терапии. Основные преимущества MMSN: - **Улучшенная точность классификации**, даже при отсутствии данных; - **Устойчивость к неполноте** или отсутствию модальности; - **Простота и э