ODYSSEY: Open-World Quadrupeds Exploration and Manipulation for Long-Horizon Tasks

## Контекст Область исследования, связанная с возможностью обучения роботами выполнять долгосрочные задачи в условиях разнообразных сред, подчеркивает важность интеграции семантического рассуждения, общеупотребимого робототехнического управления и адаптивных методов перемещения. Однако существуют три ключевых проблемы, стоящие на пути построения эффективных систем робот-ассистентов. Во-первых, хотя языковые модели совершенствовались в семантических задачах, они ограничены круглосточными сценариями, не подходят для сложных технологических сред. Во-вторых, текущие стратегии манипуляции не устоят перед разнообразием конфигураций объектов в открытых средах. В-третьих, робот-ассистенты должны обеспечить гибкость движения в комплексе с точной управляемостью конечного приспособления, что требует дополнительных исследований. Целью нашей работы является разработка универсальной системы "ODYSSEY" для легких роботов-квадрупедов с манипуляторами, способной решать открытые задачи в пространстве с помощью лексико-языковых моделей. ## Метод ODYSSEY — это комбинация методологии, где интегрируется высокоуровневый планирователь семантического плана с низкоуровневым контроллером тела робота. Для решения задачи оценки ситуации в живой среде мы применяем визуально-языковую модель, которая декомпозирует длинные инструкции на подзадачи, обеспечивая точность исполнения. Для того, чтобы решить задачу жесткого прижимания в технологических средах, мы использовали новый контроллер, позволяющий роботу выполнять непрерывные действия в разнообразных территориях. Мы также разработали эталонный тестовый набор для тестирования роботов в различных средах. ## Результаты Мы провели эксперименты в симуляционной среде и на реальных роботах, тестируя возможности ODYSSEY в решении задач, включающих различные территории и предметы. Наши результаты показали, что робот может выполнять длинные задачи, выполняя многократные действия в различных условиях. Мы также проверили гибкость и точность конечного приспособления в условиях сложной технической среды. ## Значимость Система ODYSSEY может применяться в промышленном производстве, домашних условиях и в сложных технологических процессах. У нее большая гибкость и применяемость в различных сценариях. Она повышает уровень управляемости и точности, что делает ее уникальной в сравнении с традиционными ботовыми технологиями. ## Выводы Представленная система ODYSSEY демонстрирует значительные достижения в области организации сложных робототехнических задач. Она применяется в