Fast-SEnSeI: Lightweight Sensor-Independent Cloud Masking for On-board Multispectral Sensors

## Контекст Область исследования астрономии и космонавтики широко использует спутниковые данные для анализа земной поверхности и внеземных объектов. Одной из ключевых задач в этой области является обнаружение и исключение облаков из изображений, так как они могут серьезно затруднить выполнение таких задач, как картирование поверхности, измерение температурных параметров и другие. Несмотря на появление различных моделей глубокого обучения для облачного очистки, они часто сталкиваются с проблемами, связанными с необходимостью настройки для конкретных спутниковых сенсоров и их ограничениями по количеству спектральных каналов. Эта ситуация приводит к относительному ограничению гибкости и эффективности их применения в реальных условиях. В этом контексте было создано новое решение, Fast-SEnSeI, которое предлагает многоцелевой подход к облачному очистке, основанным на гибкой, сенсорно независимой архитектуре. ## Метод Fast-SEnSeI представляет собой новую модель, которая использует легковесную архитектуру предобработки для сенсорно независимого облачного очистки. Эта модель состоит из модуля Fast-SEnSeI-Encoder, который способен обрабатывать спектральные данные многоканальных сенсоров, независимо от их конфигурации. Используя усовершенствованный спектральный дескриптор, новая модель может обрабатывать данные с различными частотными диапазонами, включая нестандартные варианты. Для финальной сегментации облаков используется компактная модель сегментации на основе модифицированного U-Net, которая оптимизирована для работы на FPGA. Модель весьма эффективна и может быть развернута на пространственно-квалифицированном оборудовании. Для повышения эффективности, Fast-SEnSeI применяет аппаратно-программную архитектуру, в которой модуль обработки данных работает на CPU, а модель сегментации запускается на FPGA, обеспечивая высокую производительность и низкий потребление энергии. ## Результаты Для оценки эффективности Fast-SEnSeI проводились эксперименты на двух наборах данных: Sentinel-2 и Landsat 8. Эти данные отличаются различными конфигурациями спектральных каналов и различными условиями облачности. Результаты показали, что модель Fast-SEnSeI демонстрирует высокую точность разделения облаков, независимо от конфигурации сенсора, и показывает высокую скорость работы на эмбеддденных процессорах. Также было проверено, что модель хорошо справляется с разными условиями облачности, включая сложные сцены с миксем облаков и земной поверхности. ## Значимость Результаты Fast-SEnSeI могут быть применены в различных сферах, таких как картирование земли, измерение температурных параметров, изучение природных ресурсо