Self-Augmented Robot Trajectory: Efficient Imitation Learning via Safe Self-augmentation with Demonstrator-annotated Precision

#### Контекст Imitation learning является обещающим подходом для обучения роботских агентов, однако обычные методы часто требуют большого объема данных, полученных либо многократными демонстрациями, либо случайным исследованием среды. Это не только усложняет процесс обучения, но также может привести к нежелательным столкновениям, особенно при выполнении задач с ограниченным клеточным расположением (например, взаимоприкладыванием штыря в отверстие). Такие ситуации влекут за собой необходимость вручную восстанавливать среду и приводят к дополнительным трудозатратам. Данное исследование адресует эти проблемы, предлагая Self-Augmented Robot Trajectory (SART) — фреймворк, позволяющий обучать политику только на одной демонстрации человека, при этом самостоятельно расширяя выборку данных с помощью автономного модифицирования методикой с учетом пределов точности, отмеченных демонстратором. #### Метод SART работает в двух этапах: (1) **Обучение по одной демонстрации** — человек предоставляет один пример действий, а сетка точности, представленная шаровыми покрытиями вокруг ключевых точек маршрута, автоматически аннотируется в среде; (2) **Самостоятельное расширение** — робот генерирует разнообразные, безопасные маршруты в пределах заданных точностных границ, при этом обеспечивая их слияние с исходной демонстрацией человека. Этот подход снижает необходимость вручную восстанавливать среду и позволяет роботу самостоятельно улучшать свои навыки в условиях минимального вмешательства человека. #### Результаты Эксперименты проводились в симуляционной среде и на реальных задачах манипуляции. Оценки показали, что SART достигает значительно больших вероятностей успеха по сравнению с политиками, обученными только на демонстрациях человека. Отчеты и видеоматериалы доступны на сайте проекта (ссылка: https://sites.google.com/view/sart-il). #### Значимость Предложенный подход может быть применен в различных областях, где требуется улучшение эффективности обучения роботских агентов с минимальным участием человека. Особый потенциал SART открывается в задачах с тесным пространственным режимом, таких как взаимоприкладывание штырей в отверстия. Данный подход снижает затраты на повторные демонстрации, обеспечивает безопасность и увеличивает эффективность сбора данных. #### Выводы Результаты показывают высокую эффективность SART в сравнении с классическими методами роботского обучения. Будущие исследования будут направлены на расширение фреймворка для управления более сложными задачами, включая те, что требуют динамического решения в процессе выполнения.