Deep Skin Lesion Segmentation with Transformer-CNN Fusion: Toward Intelligent Skin Cancer Analysis

## Контекст Исследование рассматривает проблемы анализа злокачественных тканевых повреждений на злоупотребление, который требует высокой точности и производительности. Злоупотребление может быть выражено в разных формах, включая как визуально-структурные, так и химические изменения в тканях. Существующие решения часто страдают от снижения точности и проблем с границами образов, что снижает их подходность для автоматического анализа. Есть необходимость в разработке более точных и устойчивых методов, которые могут обрабатывать сложные структуры и границы в образах. Мотивация заключается в создании метода, который мог бы улучшить анализ и оптимизировать процесс диагностики, обеспечив высокую точность и устойчивость в обработке таких изображений. ## Метод Для решения указанных проблем, авторы предлагают новую архитектуру, которая объединяет модуль трансформера с классическим конвейером преобразования изображений, использующим как "encoder" так и "decoder". Трансформер используется для получения глобальной семантической информации, а конвейер сохраняет локальные фичи, такие как границы и текстуры. Для улучшения локальных границ используется аттенцион-механизм, а для повышения точности граничного разделения используется метод многоуровневого восстановления границ. Архитектура также включает в себя многоуровневый путь для восстановления размера изображения, что позволяет улучшить консистентность и точность сегментации. Метод был оптимизирорван с помощью различных тестов и анализов, включая сравнительные испытания, анализ чувствительности параметров и эффект данных аугментации. ## Результаты В ходе экспериментов, проведенных на различных наборах данных, показано, что предлагаемый подход показывает значительное улучшение показателей mIoU, mDice и mAcc по сравнению с другими методами. Особое внимание уделено граничной реконструкции и восстановлению структур в сложных случаях. Модель показала высокую устойчивость к изменению разрешения входных изображений и кросс-данных. Эти результаты подтверждают эффективность нового метода в обработке сложных структур и границ в образах, что делает его подходящим для применения в медицинской обработке изображений, в частности, для анализа кожных повреждений. ## Значимость Разработанный метод может быть применен в различных областях, включая медицинскую информатику, анализ кожных повреждений, клиническую диагностику и исследования. Он предлагает значительные преимущества, такие как улучшение точности распознавания и устойчивость к различным факторам, таким как разрешение