GACL: Grounded Adaptive Curriculum Learning with Active Task and Performance Monitoring
2508.02988v1
cs.RO, cs.AI
2025-08-09
Авторы:
Linji Wang, Zifan Xu, Peter Stone, Xuesu Xiao
Резюме на русском
**Резюме**
Успешное обучение роботов в сложных задачах часто зависит от ручного проектирования последовательности задач, что требует значительных усилий и может привести к неэффективным результатам. В статье предлагается **Grounded Adaptive Curriculum Learning (GACL)** — подход, который автоматизирует генерирование последовательности задач для обучения роботов в реальной среде. GACL основывается на трех основных инновациях: (1) универсальном представлении задач, позволяющем гибко адаптироваться к различным сложностям; (2) адаптивной системе отслеживания прогресса, которая автоматически адаптирует последовательность задач к текущим возможностям робота; и (3) гранулярному подходу, обеспечивающему релевантность задач к целевому применению, благодаря одновременному использованию синтетических и специфичных для данной задачи данных. Исследования показали, что GACL повышает успешность обучения в таких задачах, как подвижность роботов на колесах в ограниченных пространствах и локмотив роботов-четвероногих в трудных трехмерных местах, сравнительно с текущими методами. Это демонстрирует эффективность GACL в решении проблем обучения роботов в реальном мире.
Abstract
Curriculum learning has emerged as a promising approach for training complex
robotics tasks, yet current applications predominantly rely on manually
designed curricula, which demand significant engineering effort and can suffer
from subjective and suboptimal human design choices. While automated curriculum
learning has shown success in simple domains like grid worlds and games where
task distributions can be easily specified, robotics tasks present unique
challenges: they require handling complex task spaces while maintaining
relevance to target domain distributions that are only partially known through
limited samples. To this end, we propose Grounded Adaptive Curriculum Learning,
a framework specifically designed for robotics curriculum learning with three
key innovations: (1) a task representation that consistently handles complex
robot task design, (2) an active performance tracking mechanism that allows
adaptive curriculum generation appropriate for the robot's current
capabilities, and (3) a grounding approach that maintains target domain
relevance through alternating sampling between reference and synthetic tasks.
We validate GACL on wheeled navigation in constrained environments and
quadruped locomotion in challenging 3D confined spaces, achieving 6.8% and 6.1%
higher success rates, respectively, than state-of-the-art methods in each
domain.
Ссылки и действия
Дополнительные ресурсы: