MFAF: An EVA02-Based Multi-scale Frequency Attention Fusion Method for Cross-View Geo-Localization

#### Контекст **Cross-view geo-localization** — это задача определения географического положения картинки, спутникового изображения или другого изображения, применяясь к галерее похожих изображений. Она сильно ограничена внешними факторами, такими как переменные точки зрения, изменения освещения, интерфейсные факторы. Эти факторы сильно затрудняют выделение достаточно дискриминативных признаков. Существующие решения часто опираются на сегментацию фичи из карты признаков или использование однородных моделей, не учитывая корреляцию между различными частотными особенностями и пространственным контекстом. В этой работе мы предлагаем новую модель, MFAF, которая адресует эти проблемы. #### Метод Методология MFAF основана на **EVA02** (Efficient Vision Transformer) и включает два основных модуля: **Multi-Frequency Branch-wise Block (MFB)** и **Frequency-aware Spatial Attention (FSA)**. **MFB** — это блок, который способен выделять **логические фичи (low-frequency)** и **крайности (high-frequency)** на разных уровнях масштаба. Это позволяет добиться более стабильных и точных представлений признаков. Затем **FSA** множественным образом адаптирует внимание к определенным частям частотных фичей, сильно уменьшая шум и влияние вариабельного зрения. Эти модули формируются в интегрированную систему с EVA02, чтобы повысить точность и качество локализации. #### Результаты Мы проверили MFAF на нескольких стандартных датасетах: **University-1652**, **SUES-200** и **Dense-UAV**. Эксперименты показали, что наша модель показывает высокую точность в **cross-view geo-localization** и **drone localization/navigation** задачах. Мы сравнили результаты с популярными методами (например, GF-Net, ST-Net) и установили, что **MFAF** показывает значительные преимущества в объеме деталей, локальной точности и устойчивости в условиях переменных точек зрения. #### Значимость Метод MFAF имеет широкие **применения в области геолокации**, **робототехники** и **аэронавигации**. Он позволяет повысить уровень точности и устойчивости в условиях сложной визуальной среды. Наши достижения включают новую архитектуру с возможностью **мощного внимания к частотам** и **многоуровневым представлениям**, что может способствовать развитию моделей geo-localization в будущем. #### Выводы Мы предложили MFAF — мощный метод для решения задач **cross-view geo-localization**, основанный на EVA02. Метод доказал высокую эффективность, благодаря интеграции **MFB** и **FSA**, обеспечивающей более детальное и устойчивое описание фичей. Мы планируем дальнейшие исследования, включая улучшение моделей для работы в разных условиях визуального восприятия.