TrajBooster: Boosting Humanoid Whole-Body Manipulation via Trajectory-Centric Learning

#### Контекст Проблема ограниченной доступности высококачественных демонстраций все еще остается значимым препятствием для обучения эффективных моделей Vision-Language-Action (VLA) в робототехнике. Эта проблема усложняется при работе с бипедными роботами, так как для их применения требуется большое количество качественных данных. Многие существующие модели, в том числе визуально-языковые модели, способны работать в разных средах, но страдают от неэффективности при переносе на новые роботы. Это способствует необходимости создания универсальных методов, позволяющих эффективно переносить модели между различными роботами с минимальными изменениями. #### Метод TrajBooster представляет собой модель, которая использует многочисленные данные, собранные на большом количестве бипедных роботов, для повышения производительности моделей VLA. Основная идея заключается в использовании траекторий конечных действительностей (end-effector trajectories) в качестве морфологически независимого интерфейса. Для этого TrajBooster (i) извлекает 6D траектории конечных действительностей двух рук с большого количества данных, собранных у бипедных роботов, (ii) переносит эти траектории в симулятор, используя целевой робот Unitree G1 с внедренным цельным центральным управляющим устройством, который может выравнивать недостаточное количество данных в достаточное для задания целей, и (iii) создает гетерогенные тройки, объединяющие исходные данные визуальных и языковых сигналов с робото-совместимыми действиями, чтобы обучить модель VLA. Этот подход позволяет существенно снизить необходимость в ограниченных данных для целевого робота, увеличивая продолжительность первоначального этапа обучения. #### Результаты После применения TrajBooster к Unitree G1 было получено улучшение производительности моделей VLA в сравнении с текущими подходами. Эта модель была успешно развернута на Unitree G1, где она удовлетворительно выполняла задачи в бытовой среде, включая квадрупиду, перекрытие высоты и организацию целей. Эксперименты показали, что TrajBooster не только существенно улучшил уровень общности и надёжности, но и позволил значительно сократить необходимость в ручном управлении роботом в ходе обучения. Эта модель позволила повысить производительность бипедных роботов в сравнении с другими методами, используя только небольшое количество данных. #### Значимость Метод TrajBooster имеет широкие применения в сфере робототехники, в том числе в бытовой робототехнике, бытовой робототехнике с производственными целями, а также в сфере здравоохранения. Он может быть использован для улучшения представления роботов во время заданий, предоставляя более точные и надёжные