Liaohe-CobotMagic-PnP: an Imitation Learning Dataset of Intelligent Robot for Industrial Applications

2509.23111v1 cs.RO, cs.AI 2025-10-01
Авторы:

Chen Yizhe, Wang Qi, Hu Dongxiao, Jingzhe Fang, Liu Sichao, Zixin An, Hongliang Niu, Haoran Liu, Li Dong, Chuanfen Feng, Lan Dapeng, Liu Yu, Zhibo Pang

Резюме на русском

```markdown ## Контекст В домене Индустрии 4.0, роботы приходятся под влияние динамических среды и вынуждены реагировать на неоднородные и сильно связанные интерференции. Однако, определять динамические состояния окружения через методы мультимодальной сенсорной обработки остается трудным заданием. Чтобы решать эту проблему, представлен Liaohe-CobotMagic-PnP, большой индустриальный датасет, разработанный для моделирования и контроля роботов в условиях хаотичных интерференций. Этот датасет включает в себя многомерные интерференционные признаки, такие как размер, цвет и изменения освещения. Он также использует высокоточные сенсоры для синхронного получения визуальных, торцевых и состояний сочленений. Реальность сценариев, достигнутая в 85% геометрической похожести, а также стандартизованные градиенты освещения, обеспечивают достоверность данных в реальном мире. ## Метод Данный датасет реализован с помощью системы ROS (Robot Operating System), что позволяет добиться микросекундной синхронизации и защиты от вибраций. Он включает сцены с высокой геометрической похожестью на реальность и гарантирует стабильную операцию в интерферентных условиях. Высококачественный набор данных позволяет проверить модели и улучшить стабильность роботов в условиях сильно взаимосвязанных интерференций. ## Результаты Эксперименты показали, что данный датасет способствует улучшению моделирования, увеличивая точность и надежность в условиях сильно взаимосвязанных интерференций. Он также повышает уровень стабильности в работе роботов в условиях производства, которые часто представляют собой сложные интерференции. ## Значимость Этот датасет может быть применен в различных индустриальных приложениях, включая системы производства, автоматизированные системы хранения и освоения роботов в сложных условиях производства. Он предлагает преимущества в улучшении точности и надежности работы роботов, а также может повлиять на развитие робототехники в Индустрии 4.0. ## Выводы Liaohe-CobotMagic-PnP является открытым датасетом, который оказывает влияние на развитие роботов в условиях сложных интерференций. Будущие исследования будут направлены на улучшение методологии, применение этого датасета в различных сферах и оптимизацию роботов для производственных сред. ```

Abstract

In Industry 4.0 applications, dynamic environmental interference induces highly nonlinear and strongly coupled interactions between the environmental state and robotic behavior. Effectively representing dynamic environmental states through multimodal sensor data fusion remains a critical challenge in current robotic datasets. To address this, an industrial-grade multimodal interference dataset is presented, designed for robotic perception and control under complex conditions. The dataset integrates multi-dimensional interference features including size, color, and lighting variations, and employs high-precision sensors to synchronously collect visual, torque, and joint-state measurements. Scenarios with geometric similarity exceeding 85\% and standardized lighting gradients are included to ensure real-world representativeness. Microsecond-level time-synchronization and vibration-resistant data acquisition protocols, implemented via the Robot Operating System (ROS), guarantee temporal and operational fidelity. Experimental results demonstrate that the dataset enhances model validation robustness and improves robotic operational stability in dynamic, interference-rich environments. The dataset is publicly available at:https://modelscope.cn/datasets/Liaoh_LAB/Liaohe-CobotMagic-PnP.

Ссылки и действия