Online Dynamic Goal Recognition in Gym Environments

2509.23244v1 cs.RO, cs.AI 2025-10-01
Авторы:

Shamir Matan, Elhadad Osher, Nageris Ben, Mirsky Reuth

Резюме на русском

## Контекст Гол-рекогнитион (GR) — задача определения намеренного целевого поведения агента на основе частичных наблюдений о его действиях, как правило, в режиме онлайн и однократного использования. Несмотря на успехи в модельно-бесплатной GR, особенно в приложениях, таких как робототехника, наблюдение и помощные системы, данное направление остается дезорганизованным из-за несогласованности бенчмарков, доменов и протоколов оценки. Для решения этой проблемы мы предлагаем два открытых-исходных фреймворка: gr-libs и gr-envs. Они поддерживают создание, оценку и сравнение GR-алгоритмов в средах стандарта Gym. Эти библиотеки создают стандартизированную, расширяемую и воспроизводимую платформу для продвижения исследований в области GR. ## Метод Мы разработали две открытые библиотеки: gr-libs и gr-envs. Gr-libs включает модульные реализации MDP-GR базей, диагностические инструменты и оценочные средства. Gr-envs предоставляет курсорную серию сред, предназначенных для динамических и целевого поведения, а также оболочки, обеспечивающие совместимость с основными инструментами RL. Эти фреймворки обеспечивают стандартизированный, расширяемый и воспроизводимый подход для исследований GR. ## Результаты Мы проводили эксперименты на различных средах, используя стандартные GR-алгоритмы. Эти эксперименты позволили проверить качество работы алгоритмов в разных условиях. Мы также демонстрировали возможности новых фреймворков, показав их модульность и простоту использования. Результаты показали, что наши библиотеки повышают качество исследований, обеспечивая согласованность и прозрачность. ## Значимость Инструменты, предложенные в этой работе, могут быть применены в различных областях, включая робототехнику, системы наблюдения и помощные системы. Они обеспечивают надежный, открытый способ проверки и сравнения GR-алгоритмов, повышая качество исследований. Данные разработки могут способствовать развитию новых технологий в области интеллектуальных систем. ## Выводы Мы представили две открытые библиотеки, gr-libs и gr-envs, для развития GR-исследований. Наши разработки позволяют стандартизировать процессы и улучшить качество исследований в этой области. Будущие исследования будут сконцентрированы на расширении функционала этих библиотек и развитии новых GR-алгоритмов.

Abstract

Goal Recognition (GR) is the task of inferring an agent's intended goal from partial observations of its behavior, typically in an online and one-shot setting. Despite recent advances in model-free GR, particularly in applications such as human-robot interaction, surveillance, and assistive systems, the field remains fragmented due to inconsistencies in benchmarks, domains, and evaluation protocols. To address this, we introduce gr-libs (https://github.com/MatanShamir1/gr_libs) and gr-envs (https://github.com/MatanShamir1/gr_envs), two complementary open-source frameworks that support the development, evaluation, and comparison of GR algorithms in Gym-compatible environments. gr-libs includes modular implementations of MDP-based GR baselines, diagnostic tools, and evaluation utilities. gr-envs provides a curated suite of environments adapted for dynamic and goal-directed behavior, along with wrappers that ensure compatibility with standard reinforcement learning toolkits. Together, these libraries offer a standardized, extensible, and reproducible platform for advancing GR research. Both packages are open-source and available on GitHub and PyPI.

Ссылки и действия