YOLO Ensemble for UAV-based Multispectral Defect Detection in Wind Turbine Components
2509.04156v1
cs.CV, cs.AI, cs.RO, 68T07, 68T45, 68U10, 68T40, I.2.10; I.4.8; I.5.4; I.2.9
2025-09-06
Авторы:
Serhii Svystun, Pavlo Radiuk, Oleksandr Melnychenko, Oleg Savenko, Anatoliy Sachenko
Резюме на русском
#### Контекст
Управление и мониторинг состояния ветрогенерирующих установок (ВГУ) является критическим для повышения их эффективности и надежности. Одним из основных задач регулярного контроля является обнаружение дефектов в критических компонентах, таких как винты, лонжероны и башни. Несмотря на развитие технологий, существуют сложности в обнаружении дефектов на различных типах образов, в том числе визуальных и термальных. Это приводит к необходимости развития систем, которые могут обеспечивать точное и надежное обнаружение дефектов в реальном времени. Улучшение точности обнаружения дефектов является важной задачей, поскольку неточность может привести к серьезным последствиям. Многоканальный подход, использующий визуальные и термальные каналы, позволяет улучшить точность и надежность обнаружения дефектов.
#### Метод
Для решения задачи обнаружения дефектов в компонентах ВГУ был разработан ансамбль YOLO Ensemble, включающий YOLOv8 в качестве общего модели и специализированную модель для теплового импульса. Модели обучались на специально подготовленных данных, включающих изображения визуального и термального диапазона. Ансамбль был реализован с использованием алгоритма комбинирования баундинговых боксов, который объединяет прогнозы моделей в единую модель. Эта структура позволяет использовать преимущества как общей модели, так и специализированной, для повышения точности обнаружения.
#### Результаты
В результате экспериментов была достигнута высокая точность обнаружения. Использование ансамбля YOLO Ensemble позволило достичь математического ожидания метрики Average Precision ([email protected]) равного 0.93 и F1-метрики равного 0.90. В сравнении с отдельной моделью YOLOv8, которая показала [email protected] в 0.91, ансамбль показал значительное улучшение в обнаружении дефектов. Этот результат отражает эффективность интеграции термальных данных и визуальных данных в одной системе.
#### Значимость
Результаты этого исследования могут быть применены для реального мониторинга компонентов ВГУ. Ансамбль YOLO Ensemble позволяет повысить точность и надежность обнаружения дефектов, что может существенно улучшить эффективность технического обслуживания и безопасность эксплуатации ВГУ. Обнаружение дефектов в реальном времени также может помочь в быстром реагировании на поломки, снижая риск непредвиденных сбоев.
#### Выводы
Данное исследование доказывает, что ансамбль YOLO Ensemble является эффективным решением для обнаружения дефектов в компонентах ВГУ. Оно объединяет мощности визуальной и термальной обработки изображений, улучшая качество результа
Abstract
Unmanned aerial vehicles (UAVs) equipped with advanced sensors have opened up
new opportunities for monitoring wind power plants, including blades, towers,
and other critical components. However, reliable defect detection requires
high-resolution data and efficient methods to process multispectral imagery. In
this research, we aim to enhance defect detection accuracy through the
development of an ensemble of YOLO-based deep learning models that integrate
both visible and thermal channels. We propose an ensemble approach that
integrates a general-purpose YOLOv8 model with a specialized thermal model,
using a sophisticated bounding box fusion algorithm to combine their
predictions. Our experiments show this approach achieves a mean Average
Precision ([email protected]) of 0.93 and an F1-score of 0.90, outperforming a standalone
YOLOv8 model, which scored an [email protected] of 0.91. These findings demonstrate that
combining multiple YOLO architectures with fused multispectral data provides a
more reliable solution, improving the detection of both visual and thermal
defects.