MR6D: Benchmarking 6D Pose Estimation for Mobile Robots

2508.13775v1 cs.CV, cs.RO 2025-08-21
Авторы:

Anas Gouda, Shrutarv Awasthi, Christian Blesing, Lokeshwaran Manohar, Frank Hoffmann, Alice Kirchheim

Резюме на русском

## Контекст Мобильные платформы во многих случаях не имеют ручного управления или робот-манипулятора, а взаимодействуют напрямую с субъектами среды, окружающих их. Эти субъекты часто являются более крупными, имеют сложные формы и взаимодействуют с тяжелыми самозакрытиями, что приводит к более сложным задачам определения положения в пространстве, чем в стандартных 6D-задачах оценки положения для робот-манипуляторов. Доступные научные вызовы в области 6D-оценки положения для мобильных платформ не хватает полноты и репрезентативности, так как многие из них ограничены своими данными, которые не учитывают важных факторов в мобильной робототехнике. По этой причине необходимо создать новый датасет, который будет отражать реальные условия для мобильных платформ, чтобы позволить более точный моделирование и проверку систем положения в 3D-пространстве. ## Метод MR6D — это датасет, созданный для оценки 6D-положения в мобильных машинах в промышленных условиях. Он включает 92 реальных сцен, 16 различных объектов, и представляет их в статических и динамических взаимодействиях. Датасет был создан, чтобы конкретно отразить вызовы, связанные с мобильными платформами, включая дальнюю перспективу, сложные объекты, различные конфигурации и самозакрытия. Использование этого датасета позволяет лучше понять и моделировать положение машин в пространстве, чтобы создать различные технические решения, которые оптимизируют поведение мобильных платформ в промышленных условиях. ## Результаты Данные из MR6D были протестированы на различных моделях 6D-оценки положения. На экспериментах показано, что существующие модели не подходят для работы с такими сложными условиями, которые обычно встречаются в мобильных платформах. Мы также выявили существующие проблемы с 2D-сегментацией, которые существенно влияют на точность 6D-оценки положения. Эти результаты демонстрируют, что необходимы новые подходы для усовершенствования 6D-оценки положения в мобильной робототехнике. ## Значимость MR6D дает новые возможности для развития и оценки 6D-оценки положения в мобильной робототехнике. Он может быть применен в различных промышленных сценариях, таких как автоматизация производства и управление логистикой. Благодаря своему реалистичному подходу, MR6D предоставляет более полную и репрезентативную оценку 6D-оценки положения, что может поднять показатели производительности и точности в многочисленных мобильных приложениях. ## Выводы MR6D — это первый датасет, который дает возможность проверить и развить модели 6D-оценки положения в мобильных платфор

Abstract

Existing 6D pose estimation datasets primarily focus on small household objects typically handled by robot arm manipulators, limiting their relevance to mobile robotics. Mobile platforms often operate without manipulators, interact with larger objects, and face challenges such as long-range perception, heavy self-occlusion, and diverse camera perspectives. While recent models generalize well to unseen objects, evaluations remain confined to household-like settings that overlook these factors. We introduce MR6D, a dataset designed for 6D pose estimation for mobile robots in industrial environments. It includes 92 real-world scenes featuring 16 unique objects across static and dynamic interactions. MR6D captures the challenges specific to mobile platforms, including distant viewpoints, varied object configurations, larger object sizes, and complex occlusion/self-occlusion patterns. Initial experiments reveal that current 6D pipelines underperform in these settings, with 2D segmentation being another hurdle. MR6D establishes a foundation for developing and evaluating pose estimation methods tailored to the demands of mobile robotics. The dataset is available at https://huggingface.co/datasets/anas-gouda/mr6d.

Ссылки и действия