Multimodal Conditional MeshGAN for Personalized Aneurysm Growth Prediction

## Контекст Прогнозирование роста аневризм гортанной артерии (аневризма) является ключевым элементом в планировании лечения и предотвращении трагических исходов, таких как разрыв. Однако прогнозирование роста аневризм представляет собой сложную задачу, так как требуется учитывать как тонкие местные деформации, так и глобальные анатомические изменения в сложной трёхмерной геометрии. Наличие точных предсказаний роста аневризм не только помогает планировать вмешательства вовремя, но и улучшает результаты лечения. Несмотря на некоторые успехи в искусственном интеллекте для решения таких задач, существуют значительные ограничения в точности и точности моделирования трёхмерных аневризм. ## Метод Мы предлагаем Multimodal Conditional MeshGAN (MCMeshGAN), первый трёхмерный конджициональный Mesh-to-Mesh Generative Adversarial Network (GAN), рассчитанный на прогнозирование роста аневризм. Наша модель включает в себя двухуровневую архитектуру, объединяющую две основные компоненты: Local KNN-Based Convolutional Network (KCN) для сохранения тонких локальных деталей и Global Graph Convolutional Network (GCN) для учета глобального структурного контекста. Однако глубокие GCN часто страдают от проблемы "over-smoothing", когда они теряют тонкие геометрические детали в ходе обучения. Мы устранили эту проблему, внедрив в KCN окрестностную сеть классификатора (Neighborhood Classifier), что позволяет сохранять тонкие геометрические детали. Кроме того, в модели включён узел управления условиями (condition branch), который позволяет быть учтенными клинические признаки, такие как возраст, пол и промежуток времени, чтобы генерировать анатомически правильные, временно контролируемые прогнозы. ## Результаты Мы проводили подробные эксперименты с помощью нашей новой подготовленной базы данных TAAMesh, содержащей 590 многомодальных записей (CT-сканы, 3D-меш, клинические данные) от 208 пациентов. Результаты показали, что MCMeshGAN показывает значительно наилучшие результаты по сравнению с состоянием технологии (SOTA) в терминах точности геометрии и точности оценки диаметра, которые являются критичными для клинических решений. Эти результаты доказывают, что наша модель обеспечивает более точное и конкретное моделирование трёхмерных аневризм, что является важной поддержкой для персонализированного лечения и временного планирования. ## Значимость Модель MCMeshGAN может быть применена в многочисленных областях, включая персонализированную клиническую практику, тренировку медицинских работников, исследования в области медицинских изображений и трёхмерных моделей. Её преимущество в том, что она может точно оценить рост аневризм и улучшить с