Object Pose Estimation through Dexterous Touch

## Контекст Распознавание позы объектов является ключевым элементом для выполнения манипуляций и взаимодействий в робототехнике, особенно в условиях недостатка визуальной информации или при наличии факторов, способствующих ошибкам определения, таких как световые условия, помехи или изменения внешнего вида объектов. Тактильные сенсоры, несмотря на свою точность в локальном сенсорном восприятии, часто не могут обеспечить полное восприятие объекта из-за ограниченности их данных. Данная работа адресует эти проблемы, используя сенсорно-моторное исследование, которое активно контролирует движения руки робота для взаимодействия с объектом. Такая подход позволяет сформировать трехмерные данные, используемые для точного построения модели объекта и определения его позы. ## Метод Методология основывается на использовании многоруких роботов, где одна рука стабилизирует объект, а другая производит активное исследование. Тактильные данные, собираемые в процессе, обрабатываются с помощью методов машинного обучения, в том числе Реинфорсментного Обучения (RL). Это позволяет роботу выявлять ключевые особенности позы объекта и улучшать свою модель в течение взаимодействия. Архитектура метода включает в себя интеграцию трехмерных точек, собранных сенсорами, с глубоким обучением для построения точной модели и определения позы. ## Результаты Эксперименты проводились на широком спектре объектов, в том числе сложных форм и нестандартных конфигураций. Метод показал высокую точность в определении позы в условиях существующих помех и изменений внешнего вида. Использование трёхмерных точек, полученных в результате сенсорного исследования, позволяет обеспечить высокую точность и устойчивость в определении координат. Эта модель демонстрирует способность активно изучать неизвестные объекты, оптимизировав свой подход в процессе взаимодействия. ## Значимость Предложенный подход может быть применен в различных областях, включая автоматизированные системы сборки, робототехнические системы для домашних целей и медицинские приложения. Основные преимущества заключаются в том, что данный подход не требует предварительного знания объекта, обладает высокой устойчивостью к изменениям окружения и может адаптироваться к новым задачам. Потенциально, он может существенно улучшить точность и надежность роботов в различных интерактивных сценариях. ## Выводы Результаты демонстрируют эффективность метода в распознавании позы объекта с использованием тактильных данных и многоручного взаимодействия. Будущие исследования будут сфокализованы