Implicit Kinodynamic Motion Retargeting for Human-to-humanoid Imitation Learning

## Контекст Построение эффективных систем, позволяющих роботам воспроизводить руководство с помощью людей, является ключевым заданием в области робототехники. Одна из сложностей в этой области — научить роботу сохранять гармонию в ходе интеракции с человеком. Эффективность робота сильно зависит от того, насколько он точно может воспроизводить движения, приобретенные в процессе обучения. Одним из важных этапов в этом процессе является процесс **motion retargeting** — преобразование мотивации, выраженной человеком, в понятный для робота формат. На сегодняшний день, большинство методов motion retargeting опираются на работу с каждым кадром по отдельности. Это приводит к проблеме неэффективности при работе с большими наборами данных. Наша работа направлена на решение этой проблемы, предлагая новую модель Implicit Kinodynamic Motion Retargeting (IKMR), которая объединяет в себе две главные компоненты: **kinematics** и **dynamics**. ## Метод Методология IKMR основывается на двух основных компонентах: **масштабируемое представление темпоральных данных** в кинематике и **динамика робота** в динамике. - **Кинематика.** Мы предлагаем модель, которая тренируется на больших наборах данных с целью изучения множества возможных траекторий. Для этого мы используем двухэлементную сеть **encoder-decoder**, которая научилась предсказывать конечные траектории, учитывая темпоральную структуру данных. Это позволяет роботу оптимизировать пути движения, сохраняя их наиболее точно. - **Динамика.** Для того, чтобы полученные движения были физически возможными, мы интегрировали в модель **imitation learning**. Это позволяет нам учитывать внутреннюю динамику робота, а также гарантировать, что полученные траектории будут не только хорошо вписываться в пространство требований, но и будут выполняться на реальном роботе. ## Результаты Мы провести эксперименты на реальном роботе и в симуляционной среде с полноразмерным роботом. Наши результаты показали, что IKMR не только эффективнее существующих методов, но и позволяет достичь новых уровней точности воспроизведения движений. Мы провели анализ сравнения, показав, что наша модель дает более высокую точность воспроизведения, а также имеет более низкую стоимость ресурсов. Эти результаты доказывают, что наша модель может быть применена в реальных условиях, когда нужно воспроизводить жесты, приобретенные человеком, на роботе. ## Значимость Мы видим широкие возможности для применения нашей модели в различных областях, включая **роботизированное производство**, **роботы-компаньоны** и **прикладные технологии**. IKMR позволяет роботам более эффективно выполнять задачи, когда нужно сох