A Synthetic Data Pipeline for Supporting Manufacturing SMEs in Visual Assembly Control
2509.13089v1
cs.CV, cs.RO
2025-09-18
Авторы:
Jonas Werheid, Shengjie He, Aymen Gannouni, Anas Abdelrazeq, Robert H. Schmitt
Резюме на русском
## Контекст
Качественный контроль сборочных процессов является ключевым фактором для обеспечения качества отдельных компонентов и их интеграции в финальный продукт. Одним из способов решения этой задачи является автоматизированный контроль сборки с использованием методов видеообработки. Однако интеграция таких методов сталкивается с рядом проблем, особенно для малого и среднего предприятий (МСП), которые часто не могут позволить себе дорогостоящие методы сбора изображений, их аннотации и обучения компьютерного зрения. Моделирование синтетических данных предлагает возможность уменьшить эти затраты, но его применение в контексте контроля сборки остается недостаточно изученным.
## Метод
Предлагаемый подход основывается на генерации синтетических данных с помощью компьютерной топографии (CAD) для симулирования сцен в сборочных процессах. Используется метод обнаружения объектов для идентификации компонентов на изображениях. Архитектура представляет собой интегрированную систему, которая автоматически генерирует и аннотирует данные для обучения алгоритмов компьютерного зрения. Метод был применен к сборочным процессам с использованием симуляции планетарного зубчатого колеса.
## Результаты
Проведенные эксперименты показали высокую точность распознавания синтетических компонентов на изображениях, созданных в симуляционной среде. Метрика Mean Average Precision ([email protected]:0.95) достигла 99,5% в синтетических условиях и 93% при переходе на реальные изображения с камеры. Этот подход демонстрирует эффективность синтетических данных в создании пайплайна, который экономит время и ресурсы в сборочных процессах.
## Значимость
Процедура синтетической генерации данных может быть использована для различных сборочных процессов, обеспечивая высокую точность и экономичность. Она предлагает решение для МСП, позволяя им применять мощные методы компьютерного зрения без значительных затрат на сбор и аннотацию данных. Это может способствовать улучшению качества сборочных процессов и увеличению конкурентоспособности предприятий на рынке.
## Выводы
Результаты демонстрируют эффективность интегрированного подхода к генерации и использованию синтетических данных для контроля сборки. В будущем необходимо расширить применение этого подхода к другим типам сборочных процессов и провести дополнительные исследования для повышения точности и расширения области применения.
Abstract
Quality control of assembly processes is essential in manufacturing to ensure
not only the quality of individual components but also their proper integration
into the final product. To assist in this matter, automated assembly control
using computer vision methods has been widely implemented. However, the costs
associated with image acquisition, annotation, and training of computer vision
algorithms pose challenges for integration, especially for small- and
medium-sized enterprises (SMEs), which often lack the resources for extensive
training, data collection, and manual image annotation. Synthetic data offers
the potential to reduce manual data collection and labeling. Nevertheless, its
practical application in the context of assembly quality remains limited. In
this work, we present a novel approach for easily integrable and data-efficient
visual assembly control. Our approach leverages simulated scene generation
based on computer-aided design (CAD) data and object detection algorithms. The
results demonstrate a time-saving pipeline for generating image data in
manufacturing environments, achieving a mean Average Precision ([email protected]:0.95)
up to 99,5% for correctly identifying instances of synthetic planetary gear
system components within our simulated training data, and up to 93% when
transferred to real-world camera-captured testing data. This research
highlights the effectiveness of synthetic data generation within an adaptable
pipeline and underscores its potential to support SMEs in implementing
resource-efficient visual assembly control solutions.
Ссылки и действия
Дополнительные ресурсы: