An Event-based Fast Intensity Reconstruction Scheme for UAV Real-time Perception
2508.02238v1
cs.CV, cs.RO
2025-08-09
Авторы:
Xin Dong, Yiwei Zhang, Yangjie Cui, Jinwu Xiang, Daochun Li, Zhan Tu
Резюме на русском
Эвент-камеры, известные своей высокой температурной разрешаемостью, широким динамическим диапазоном и иммунитетом к моторному размазыванию, широко применяются в условиях низкого освещения и быстрых движений. Однако их синхронный характер ограничивает их возможности в реальном времени. Мы предлагаем евент-базский метод моментальной реконструкции интенсивности, Event-Based Single Integration (ESI), для решения этих проблем. ESI гарантирует качественное реализацию обычных фрейм-базированных методов видения в эвент-базовых сценариях, сохраняя их преимущества. Метод строит изображения интенсивности, выполнив одновременное интегрирование эвент-потока с улучшенным декрементным алгоритмом, что позволяет достичь высокой скорости работы, до 100 FPS. Этот подход успешно применяется для реального времени в UAV-применениях в тяжелых условиях видимости. Наши эксперименты показали, что ESI превосходит современные алгоритмы по скорости, качеству и эффективности, особенно в условиях низкого освещения (2-10 Лкс). Таким образом, ESI значительно повышает возможности реального времени для UAV-применений в трудновидимых условиях.
Abstract
Event cameras offer significant advantages, including a wide dynamic range,
high temporal resolution, and immunity to motion blur, making them highly
promising for addressing challenging visual conditions. Extracting and
utilizing effective information from asynchronous event streams is essential
for the onboard implementation of event cameras. In this paper, we propose a
streamlined event-based intensity reconstruction scheme, event-based single
integration (ESI), to address such implementation challenges. This method
guarantees the portability of conventional frame-based vision methods to
event-based scenarios and maintains the intrinsic advantages of event cameras.
The ESI approach reconstructs intensity images by performing a single
integration of the event streams combined with an enhanced decay algorithm.
Such a method enables real-time intensity reconstruction at a high frame rate,
typically 100 FPS. Furthermore, the relatively low computation load of ESI fits
onboard implementation suitably, such as in UAV-based visual tracking
scenarios. Extensive experiments have been conducted to evaluate the
performance comparison of ESI and state-of-the-art algorithms. Compared to
state-of-the-art algorithms, ESI demonstrates remarkable runtime efficiency
improvements, superior reconstruction quality, and a high frame rate. As a
result, ESI enhances UAV onboard perception significantly under visual
adversary surroundings. In-flight tests, ESI demonstrates effective performance
for UAV onboard visual tracking under extremely low illumination
conditions(2-10lux), whereas other comparative algorithms fail due to
insufficient frame rate, poor image quality, or limited real-time performance.
Ссылки и действия
Дополнительные ресурсы: