When Experts Disagree: Characterizing Annotator Variability for Vessel Segmentation in DSA Images

## Контекст Сегментация сосудов в 2D Digital Subtraction Angiography (DSA) используется для определения аномалий и планирования лечения строения сетчатки глаза. Однако разногласия между аннотаторами часто встречаются в этом задании, что может привести к неточностям в диагностике и лечении. Эта проблема особенно актуальна в работе с комплексными или нестандартными случаями. Целью нашего исследования является изучение их характера для точного определения неопределенности сегментации и разработки усовершенствованных алгоритмов, учитывающих эти различия. ## Метод Мы проводили анализ разногласий в сегментации сосудов, произведенных несколькими аннотаторами в DSA-изображениях. Использованы метрики, такие как Dice Similarity Coefficient (DSC), Jaccard Similarity Coefficient (JSC) и Hausdorff Distance (HD), для оценки различий в разметке. Эти метрики были применены к каждой паре аннотаторов, а также к группам аннотаторов с различным уровнем опыта. Также были проанализированы отклонения в зависимости от областей сетчатки, на которых они возникают, и развитие методов для идентификации областей, где разногласия возникают чаще. ## Результаты Мы выявили, что разногласия в сегментации сетчатки глаза встречаются наиболее часто в сложно ограниченных областях, таких как искусствы и слияния сосудов. Отклонения по DSC, JSC и HD были высокими в этих регионах, а также возникали чаще у новичков по сравнению с опытными аннотаторами. Нашлись регионы, где разногласия были наиболее выраженными, и определились факторы, влияющие на это, такие как размер сосуда и наличие свертываний. На основе этих данных были разработаны модели, учитывающие неопределенность в процессе автоматической сегментации. ## Значимость Наши результаты имеют значительное значение для медицинской импликации. Их могут использовать для принятия более информированных решений в диагностике сосудистых аномалий. Также они могут вводить неопределенность как дополнительный признак в алгоритмах автоматической сегментации, что может повысить их точность. Будущие исследования будут фокусироваться на создании более точных методов, учитывающих разногласия аннотаторов, и их интеграции в платформы для медицинских изображений. ## Выводы Мы установили, что разногласия между аннотаторами сетчатки глаза являются значительной проблемой в 2D DSA-изображениях. Обнаружены характеристики этих разногласий, которые могут быть использованы для точного определения неопределенности в сегментации. Наша работа призвана улучшить автоматические методы сегментации, учитывая эти различия, и способствовать более точным медицинским определениям. Буду