Consistent View Alignment Improves Foundation Models for 3D Medical Image Segmentation

#### Контекст В последние годы исследования в области репрезентационного обучения стали стремительно развиваться, особенно в сфере медицинской изображейной обработки. Одним из основных аспектов этой области является сегментация трехмерных медицинских изображений, где необходимо выделить различные объекты или структуры в изображении. Одним из главных проблемных моментов является несогласованность представлений изображений из разных видов (views), что приводит к замедлению обучения и ухудшению точности. Необходимость создания консистентных представлений для обеспечения более эффективного обучения и снижения ошибки в задачах сегментации является мотивацией для данного исследования. #### Метод Метод, предложенный в статье, называется Consistent View Alignment (CVA). Он основывается на самостоятельном обучении с помощью метода, который призван выравнивать взаимодополняющую информацию из разных видов данных, не вызывая ложноположительных результатов. Архитектура CVA основывается на трансформерах и рекуррентных нейронных сетях, которые обрабатывают входные данные из разных видов и создают консистентные представления. Основной идеей является то, что входные данные из разных видов должны синхронизироваться, чтобы обеспечить более точную сегментацию. #### Результаты Результаты экспериментов показали, что CVA повышает точность сегментации в трехмерных медицинских изображениях, в том числе для задач сегментации костных структур и органов. Эксперименты проводились на различных наборах данных, включая набор данных для сегментации головного мозга и спины. Использовались две модели: Primus Vision Transformer и ResEnc Convolutional Neural Network. CVA демонстрировала лучшие результаты по сравнению с другими методами, которые не использовали самостоятельное выравнивание видов. #### Значимость Метод CVA имеет широкие применения в медицинской изображейной обработке, включая сегментацию тканей, диагностику заболеваний и планирование операций. Он позволяет повысить точность и консистентность сегментационных моделей, что может существенно повысить качество анализа и обработки медицинских изображений. Для будущих исследований планируется расширить применение метода на более сложные данные, такие как видеосъемки, и исследовать потенциал CVA в сочетании с другими методами обучения. #### Выводы В целом, CVA доказала свою эффективность в создании консистентных представлений для улучшения моделей сегментации в медицинских изображениях. Она установила новые рекорды в MICCAI 2025 SSL3D challenge, показав свою превосходность по сравнению с другими самостоятельно обучаемыми методами. В дальнейшем планируется расширить применение CVA на более сложные сценарии и комбиниро