DexSkin: High-Coverage Conformable Robotic Skin for Learning Contact-Rich Manipulation
2509.18830v1
cs.RO, cs.CV, cs.LG
2025-09-25
Авторы:
Suzannah Wistreich, Baiyu Shi, Stephen Tian, Samuel Clarke, Michael Nath, Chengyi Xu, Zhenan Bao, Jiajun Wu
Резюме на русском
## Контекст
Успешное подчинение на близких к реальности задачах манипуляции требует точного обнаружения и локализации контактных событий. Однако существующие сенсорные системы, обычно ограниченные плоскими или малыми регионами, не могут предоставить объемную обработку контактных данных, необходимую для эффективного обучения в среде с большим количеством контактов. Это недостаточство ограничивает возможность искусственных систем подражать естественному трогательному чувству человека. Целью данной работы является разработка новой технологии сенсорической обвязки, которая может охватить большие зоны роботов и обеспечить высокую конформируемость, чтобы обеспечить широкую обработку контактных данных.
## Метод
Для решения этой задачи разработана **DexSkin** — современная, многослойная электронная кожа, построенная на основе многослойного капацитного материала. Она обеспечивает высокую точность контактного сенсоринга и может быть применена к любым геометрическим формам, включая сложные контуры. Данная система построена на базе сенсоров, которые используют методы многоканального давления и керамических мембран для детальной локализации контактных данных. Такая архитектура позволяет DexSkin стать модульной и гибкой в использовании для разных типов роботов и задач.
## Результаты
Для проверки того, что DexSkin позволяет достигнуть высокой точности в обработке контактных данных, проведены эксперименты на роботе с двумя параллельными клешнями. Данная система была успешно сенсоризирована по всей поверхности клешней, чтобы обеспечить широкий диапазон данных о контакте. Были проведены три основных эксперимента: реориентация объектов в руке, обмотание лентой вокруг пакета и установка маленьких предметов на контурные поверхности. Результаты показали, что DexSkin не только точно обнаруживает контакты, но и позволяет эффективно обучаться в обучении с подкреплением на реальных роботах.
## Значимость
Высокая конформируемость и модульность DexSkin позволяют применять ее в различных областях, включая робототехнику, транспортные системы и роботы-медики. Данная технология предоставляет необходимую объемную обработку контактных данных, недоступную стандартным сенсорным системам, что позволяет улучшить качество манипуляций и задач в средах, требующих тесного контакта. Это может привести к новым вызовам в робототехнике и искусственном интеллекте.
## Выводы
Разработка DexSkin достигла значительных успехов в сфере прикладной робототехники. Она эффективно решает проблемы в области контактного сенсоринга, предоставляя детальные данные и позволяя машинам учиться на ре
Abstract
Human skin provides a rich tactile sensing stream, localizing intentional and
unintentional contact events over a large and contoured region. Replicating
these tactile sensing capabilities for dexterous robotic manipulation systems
remains a longstanding challenge. In this work, we take a step towards this
goal by introducing DexSkin. DexSkin is a soft, conformable capacitive
electronic skin that enables sensitive, localized, and calibratable tactile
sensing, and can be tailored to varying geometries. We demonstrate its efficacy
for learning downstream robotic manipulation by sensorizing a pair of parallel
jaw gripper fingers, providing tactile coverage across almost the entire finger
surfaces. We empirically evaluate DexSkin's capabilities in learning
challenging manipulation tasks that require sensing coverage across the entire
surface of the fingers, such as reorienting objects in hand and wrapping
elastic bands around boxes, in a learning-from-demonstration framework. We then
show that, critically for data-driven approaches, DexSkin can be calibrated to
enable model transfer across sensor instances, and demonstrate its
applicability to online reinforcement learning on real robots. Our results
highlight DexSkin's suitability and practicality for learning real-world,
contact-rich manipulation. Please see our project webpage for videos and
visualizations: https://dex-skin.github.io/.
Ссылки и действия
Дополнительные ресурсы: