GACL: Grounded Adaptive Curriculum Learning with Active Task and Performance Monitoring

2508.02988v1 cs.RO, cs.AI 2025-08-09
Авторы:

Linji Wang, Zifan Xu, Peter Stone, Xuesu Xiao

Резюме на русском

**Резюме** Успешное обучение роботов в сложных задачах часто зависит от ручного проектирования последовательности задач, что требует значительных усилий и может привести к неэффективным результатам. В статье предлагается **Grounded Adaptive Curriculum Learning (GACL)** — подход, который автоматизирует генерирование последовательности задач для обучения роботов в реальной среде. GACL основывается на трех основных инновациях: (1) универсальном представлении задач, позволяющем гибко адаптироваться к различным сложностям; (2) адаптивной системе отслеживания прогресса, которая автоматически адаптирует последовательность задач к текущим возможностям робота; и (3) гранулярному подходу, обеспечивающему релевантность задач к целевому применению, благодаря одновременному использованию синтетических и специфичных для данной задачи данных. Исследования показали, что GACL повышает успешность обучения в таких задачах, как подвижность роботов на колесах в ограниченных пространствах и локмотив роботов-четвероногих в трудных трехмерных местах, сравнительно с текущими методами. Это демонстрирует эффективность GACL в решении проблем обучения роботов в реальном мире.

Abstract

Curriculum learning has emerged as a promising approach for training complex robotics tasks, yet current applications predominantly rely on manually designed curricula, which demand significant engineering effort and can suffer from subjective and suboptimal human design choices. While automated curriculum learning has shown success in simple domains like grid worlds and games where task distributions can be easily specified, robotics tasks present unique challenges: they require handling complex task spaces while maintaining relevance to target domain distributions that are only partially known through limited samples. To this end, we propose Grounded Adaptive Curriculum Learning, a framework specifically designed for robotics curriculum learning with three key innovations: (1) a task representation that consistently handles complex robot task design, (2) an active performance tracking mechanism that allows adaptive curriculum generation appropriate for the robot's current capabilities, and (3) a grounding approach that maintains target domain relevance through alternating sampling between reference and synthetic tasks. We validate GACL on wheeled navigation in constrained environments and quadruped locomotion in challenging 3D confined spaces, achieving 6.8% and 6.1% higher success rates, respectively, than state-of-the-art methods in each domain.

Ссылки и действия