On the Status of Foundation Models for SAR Imagery

#### Контекст Синтетический апертурный радиолокатор (SAR) — это мощная технология, используемая для получения высококачественных изображений при помощи радиоволн. Однако SAR-изображения отличаются характерными особенностями, включая большие вариации в освещении, погрешность разрешения и наличие шума. Эти характеристики делают задачи распознавания объектов в SAR-изображениях сложнее, чем в стандартных изображениях. Несмотря на развитие методов обучения с подкреплением и самостоятельных методов обучения, большинство решений для SAR-изображений остаются локализованными и не в состоянии обеспечить широкомасштабное применение. Текущие решения требуют больших объемов маневров и значительных ресурсов. Мы стремимся исследовать, могут ли самостоятельные методы обучения, использованные в общем контексте, проявить свои преимущества в задачах распознавания объектов в SAR-изображениях. #### Метод Мы применяем современные самостоятельные методы обучения к SAR-изображениям, включая DINOv2 и DINOv3, созданные на базе фреймфорка Vision Transformers (ViT). Эти модели обучаются на масштабных данных и могут работать в самостоятельном режиме без требований к масштабированию или тренировке моделей на основе подкрепления. Мы используем синтетические данные SAR для одного типа изображений, например, DOTA. Самостоятельные методы обучения позволяют моделям извлекать богатые семантические признаки, даже в условиях низкого значения целевого знака или несбалансированности данных. Мы также экспериментируем с различными конфигурациями обучения, включая различные глубины моделей и различные датасеты для задач классификации и сегментации. #### Результаты Мы проводим эксперименты на датасетах SAR-изображений для задач классификации и сегментации. Наши результаты показывают, что использование DINOv2-XL с адаптивной финетюнинговой стратегией позволяет достичь самых высоких показателей, превосходя аналогичные модели на 4–6% в точности классификации. Анализируя характеристики вывода модели, мы обнаружили, что DINOv2-XL эффективно извлекает семантические признаки по отношению к целевым объектам в SAR-изображениях. Кроме того, мы проверяем модель на датасетах с разным уровнем шума и разрешения, показывая, что DINOv2-XL достаточно устойчива к этим факторам. #### Значимость Наше исследование открывает путь к использованию самостоятельных методов обучения в SAR-изображениях, что может упростить и сделать дешевле процессы распознавания объектов в этих изображениях. Эти модели могут быть применены в сферах, таких как наблюдение за землей, мониторинг климата, безопасно