Force-Modulated Visual Policy for Robot-Assisted Dressing with Arm Motions
2509.12741v1
cs.RO, cs.AI, cs.LG
2025-09-18
Авторы:
Alexis Yihong Hao, Yufei Wang, Navin Sriram Ravie, Bharath Hegde, David Held, Zackory Erickson
Резюме на русском
#### Контекст
Robot-assisted dressing является важной задачей, способной значительно улучшить жизнь людей с мобильными ограничениями. Однако реализация этой задачи требует решения значительных вызовов. Чтобы обеспечить эффективность и комфорт при одевании, робот должен уметь справляться с труднодоступными деформируемыми одеждой, аккуратно применять силы и адаптироваться к движениям тела человека. Однако многие предыдущие работы делали существенные упрощения, такие как статичность тела человека во время одевания, что ограничивало возможности применения таких систем в реальной жизни.
#### Метод
В настоящей работе разрабатывается система контроля робота, которая может работать в условиях частичного визуального восприятия и корректироваться в реальном времени на основе сигналов силового воздействия. За основу была взята методология обучения с подкреплением в симуляционной среде, где был обучен общий параметрический политический класс, который может работать в условиях частичных визуальных входных данных. Для улучшения точности и безопасности в реальном мире были использованы методы оптимизации, которые включали локальную оптимизацию политики на основе многоmodal'ного воздействия (визуальных и силовых сигналов) и гибкого алгоритма онлайн-обучения.
#### Результаты
Опытные исследования были проведены в двух сферах: в симуляционной среде с использованием замкнутых ответных моделей тела и в реальном мире с участием 12 человек в течение 264 циклов одевания. Результаты показали, что система может успешно одевать две длинно sleev-одежды на людей, адаптируясь к разным движениям рук. Это превосходит другие подходы в степени комфорта и успешности выполнения задачи.
#### Значимость
Предлагаемый подход имеет широкие перспективы в использовании в ситуациях, где нужна роботизированная помощь в одевании, например, для пожилых людей или людей с ограниченным двигательным функционированием. Он улучшает безопасность и комфорт при одевании благодаря тому, что адаптируется к движениям тела и реагирует на посторонние воздействия визуально и силово.
#### Выводы
Разработанная система определяет новый путь в области роботизированных систем для одевания, способных адаптироваться к реальным условиям. Будущие работы будут сфокусированы на расширении возможностей системы, в том числе увеличении количества типов одежды, которые она может одевать, и расширении сценариев применения в реальной жизни.
Abstract
Robot-assisted dressing has the potential to significantly improve the lives
of individuals with mobility impairments. To ensure an effective and
comfortable dressing experience, the robot must be able to handle challenging
deformable garments, apply appropriate forces, and adapt to limb movements
throughout the dressing process. Prior work often makes simplifying assumptions
-- such as static human limbs during dressing -- which limits real-world
applicability. In this work, we develop a robot-assisted dressing system
capable of handling partial observations with visual occlusions, as well as
robustly adapting to arm motions during the dressing process. Given a policy
trained in simulation with partial observations, we propose a method to
fine-tune it in the real world using a small amount of data and multi-modal
feedback from vision and force sensing, to further improve the policy's
adaptability to arm motions and enhance safety. We evaluate our method in
simulation with simplified articulated human meshes and in a real world human
study with 12 participants across 264 dressing trials. Our policy successfully
dresses two long-sleeve everyday garments onto the participants while being
adaptive to various kinds of arm motions, and greatly outperforms prior
baselines in terms of task completion and user feedback. Video are available at
https://dressing-motion.github.io/.
Ссылки и действия
Дополнительные ресурсы: