A Synthetic Data Pipeline for Supporting Manufacturing SMEs in Visual Assembly Control

2509.13089v1 cs.CV, cs.RO 2025-09-18
Авторы:

Jonas Werheid, Shengjie He, Aymen Gannouni, Anas Abdelrazeq, Robert H. Schmitt

Резюме на русском

## Контекст Качественный контроль сборочных процессов является ключевым фактором для обеспечения качества отдельных компонентов и их интеграции в финальный продукт. Одним из способов решения этой задачи является автоматизированный контроль сборки с использованием методов видеообработки. Однако интеграция таких методов сталкивается с рядом проблем, особенно для малого и среднего предприятий (МСП), которые часто не могут позволить себе дорогостоящие методы сбора изображений, их аннотации и обучения компьютерного зрения. Моделирование синтетических данных предлагает возможность уменьшить эти затраты, но его применение в контексте контроля сборки остается недостаточно изученным. ## Метод Предлагаемый подход основывается на генерации синтетических данных с помощью компьютерной топографии (CAD) для симулирования сцен в сборочных процессах. Используется метод обнаружения объектов для идентификации компонентов на изображениях. Архитектура представляет собой интегрированную систему, которая автоматически генерирует и аннотирует данные для обучения алгоритмов компьютерного зрения. Метод был применен к сборочным процессам с использованием симуляции планетарного зубчатого колеса. ## Результаты Проведенные эксперименты показали высокую точность распознавания синтетических компонентов на изображениях, созданных в симуляционной среде. Метрика Mean Average Precision ([email protected]:0.95) достигла 99,5% в синтетических условиях и 93% при переходе на реальные изображения с камеры. Этот подход демонстрирует эффективность синтетических данных в создании пайплайна, который экономит время и ресурсы в сборочных процессах. ## Значимость Процедура синтетической генерации данных может быть использована для различных сборочных процессов, обеспечивая высокую точность и экономичность. Она предлагает решение для МСП, позволяя им применять мощные методы компьютерного зрения без значительных затрат на сбор и аннотацию данных. Это может способствовать улучшению качества сборочных процессов и увеличению конкурентоспособности предприятий на рынке. ## Выводы Результаты демонстрируют эффективность интегрированного подхода к генерации и использованию синтетических данных для контроля сборки. В будущем необходимо расширить применение этого подхода к другим типам сборочных процессов и провести дополнительные исследования для повышения точности и расширения области применения.

Abstract

Quality control of assembly processes is essential in manufacturing to ensure not only the quality of individual components but also their proper integration into the final product. To assist in this matter, automated assembly control using computer vision methods has been widely implemented. However, the costs associated with image acquisition, annotation, and training of computer vision algorithms pose challenges for integration, especially for small- and medium-sized enterprises (SMEs), which often lack the resources for extensive training, data collection, and manual image annotation. Synthetic data offers the potential to reduce manual data collection and labeling. Nevertheless, its practical application in the context of assembly quality remains limited. In this work, we present a novel approach for easily integrable and data-efficient visual assembly control. Our approach leverages simulated scene generation based on computer-aided design (CAD) data and object detection algorithms. The results demonstrate a time-saving pipeline for generating image data in manufacturing environments, achieving a mean Average Precision ([email protected]:0.95) up to 99,5% for correctly identifying instances of synthetic planetary gear system components within our simulated training data, and up to 93% when transferred to real-world camera-captured testing data. This research highlights the effectiveness of synthetic data generation within an adaptable pipeline and underscores its potential to support SMEs in implementing resource-efficient visual assembly control solutions.

Ссылки и действия