Predictive Uncertainty for Runtime Assurance of a Real-Time Computer Vision-Based Landing System

2508.09732v1 cs.CV, cs.RO 2025-08-15
Авторы:

Romeo Valentin, Sydney M. Katz, Artur B. Carneiro, Don Walker, Mykel J. Kochenderfer

Резюме на русском

## Контекст В последние годы данно-настоящие технологии, основанные на машинном обучении, позволили создать устойчивые и эффективные системы автономного управления в сфере гражданской авиации. Например, использование визуального распознавания для задач, таких как автоматическое приземление и обнаружение полосы посадки, стало возможным благодаря высокоинформативным моделям и сильному увеличению объемов изображений. Однако, существуют значительные проблемы, связанные с доказательством надежности и безопасности этих систем в критичных для безопасности авиационных приложениях. Одним из основных вызовов является обеспечение не только точности, но и достоверности предсказаний моделей во время исполнения. Работа представляет собой усилие по созданию реалистичной визуальной системы, определяющей положение самолета относительно полосы посадки, которая может быть защищена и использована в критичных ситуациях. ## Метод Предлагаемый подход представляет собой инновационную визуальную модель, основанную на нейронных сетях, для точного и быстрого определения положения самолета в отношении полосы посадки. Основные инновации включают: (i) эффективную и гибкую архитектуру нейросети, основанную на Soft Argmax, которая позволяет получать проблему регрессии проблем с ключевыми точками поддерживая реального времени выполнение на разных моделях распознавания символов; (ii) новшество функции потерь, которая приводит к убедительным и калиброванным оценкам неопределенности; и (iii) расширенную версию Residual-based Receiver Autonomous Integrity Monitoring (RAIM), которая позволила реализовать возможность исправления и отклонения неточных выводов на время исполнения. Весь метод нацелен на создание системы, которая была бы надежна для применения в сложных авиационных ситуациях. ## Результаты Команда проводила исследования, используя набор данных, содержащий многочисленные изображения полосы посадки. Результаты показывают, что новая модель превосходит базовые архитектуры в точности определения положения самолета. Кроме того, она производит калиброванные оценки неопределенности с чрезвычайно высокой точностью до сотых долей пикселя. Эти показатели не только свидетельствуют о том, что модель может эффективно работать в реальном времени, но и обеспечивают фундамент для уверенного использования в системах с безопасным применением. ## Значимость Предлагаемая модель может применяться в различных авиационных системах, таких как системы поддержки приема и ведения курса, а также в системах автоматического приземления. Она предлагает несколько преимуществ, таких как улучшенная точность, более достоверные оцен

Abstract

Recent advances in data-driven computer vision have enabled robust autonomous navigation capabilities for civil aviation, including automated landing and runway detection. However, ensuring that these systems meet the robustness and safety requirements for aviation applications remains a major challenge. In this work, we present a practical vision-based pipeline for aircraft pose estimation from runway images that represents a step toward the ability to certify these systems for use in safety-critical aviation applications. Our approach features three key innovations: (i) an efficient, flexible neural architecture based on a spatial Soft Argmax operator for probabilistic keypoint regression, supporting diverse vision backbones with real-time inference; (ii) a principled loss function producing calibrated predictive uncertainties, which are evaluated via sharpness and calibration metrics; and (iii) an adaptation of Residual-based Receiver Autonomous Integrity Monitoring (RAIM), enabling runtime detection and rejection of faulty model outputs. We implement and evaluate our pose estimation pipeline on a dataset of runway images. We show that our model outperforms baseline architectures in terms of accuracy while also producing well-calibrated uncertainty estimates with sub-pixel precision that can be used downstream for fault detection.

Ссылки и действия