Dexplore: Scalable Neural Control for Dexterous Manipulation from Reference-Scoped Exploration

## Контекст Динамические и контакт-богатые демонстрации, доступные в хенд-обджект моушн-каптур (MoCap) репозиториях, обещают ускорить прогресс в области декстерного робототвоения. Однако в этих демонстрациях часто существуют проблемы, такие как неточности, несоответствие моделируемой системы и существующих данных, а также высокая степень комплексности. Эти характеристики ограничивают возможности использования данных в существующих методах. Методы, основанные на стадиях, таких как перетargetинг, трекинг и коррекция резидуальных ошибок, либо неэффективно используют данные, либо создают цепочку ошибок, которая ухудшает результаты. В настоящей работе предлагается Dexplore — новая система, которая объединяет ретаргетинг и трекинг в единое решение, чтобы напрямую извлекать политики управления из данных MoCap на большой шалу. ## Метод Dexplore предлагает новый подход к обучению политик управления для декстерного робототвоения. Вместо того, чтобы рассматривать демонстрации как «земляные истины», Dexplore использует их как гибкие руководства, которые подстраиваются под конкретные задачи. С помощью глубокого обучения, включая reinforcement learning, метод учитывает адаптивные пространственные скопления, что позволяет политике управления оставаться в рамках демонстрационных данных, а также минимизировать контрольный усилие. Этот подход не только позволяет избегать ошибок, связанных с точностью демонстраций, но и позволяет роботу вырабатывать свои собственные стратегии. Данный подход широко масштабируется и обеспечивает высокую устойчивость к шуму в данных. ## Результаты Для проверки Dexplore были проведены эксперименты на различных руко-объектных сценариях, включая тухлые и контакт-богатые демонстрации. Было показано, что Dexplore эффективно извлекает политики управления из данных MoCap, даже если эти данные содержат существующие ошибки. Также было показано, что полученные политики очень устойчивы к шуму и могут применяться в реальном мире. Эксперименты показали, что Dexplore не только улучшает точность, но и обеспечивает более органичное взаимодействие робота с объектами. Также были проведены эксперименты с генеративным контроллером, подтвердив, что Dexplore может хорошо справляться с большим количеством данных и выполнять различные задачи. ## Значимость Предлагаемый подход Dexplore может быть применен в различных областях, включая не только робототвоение, но и другие прикладные задачи, требующие точного управления. Он обеспечивает ряд преимуществ, включая высокую точность, устойчивость к шуму и масштабируемость. Эти п