Synthetic vs. Real Training Data for Visual Navigation

## Контекст Одна из основных задач в области робототехники является развитие эффективных политик для визуального навигационного поведения. Однако существует затруднение в использовании настоящих данных, так как они часто ограничены в объёме и наличии разнообразия. Это приводит к затруднениям при обучении моделей, которые должны работать в реальных условиях. Одна из важных проблем в этой области — так называемый "симулятор-к-реальности" (sim-to-real) гэп, когда модели, обученные в симуляторе, оказываются неэффективными при использовании в реальных условиях. Таким образом, целью данной работы является изучение моделей, обученных в симуляторе, и их сравнение с моделями, обученными на реальных данных, для оценки их эффективности в реальных условиях. ## Метод В данной работе использована модель визуального навигационного поведения, которая использует симулятор для обучения, но может работать на реальном роботе в реальном времени. Основным акцентом является набор представлений, полученных с помощью предобученных моделей на большом количестве изображений. Эти представления позволяют модели свести разницу между симулятором и реальным миром. Модель тестировалась на вилочном мобильном роботе и была проверена на совместимость с другими устройствами, такими как дроны. ## Результаты Помимо тестирования в реальном мире, модель была протестирована на определенных сценариях визуальной навигации. Она показала существенное улучшение в производительности в сравнении с реально-обученными моделями, а также с предыдущими методами. Например, модель, обученная в симуляторе, показала улучшение в успешности навигации на 31% в сравнении с реально-обученной моделью. Была также проверена общизна модели, которая была успешно развернута на борту дрона. Это показало, что модель, обученная в симуляторе, может показать хороший результат не только на вилочном роботе, но и на другом типе робота. ## Значимость Исследование показывает, что симулятор — это эффективный инструмент для обучения моделей визуальной навигации, который может совпадать или даже превосходить производительность моделей, обученных на реальных данных. Благодаря этой модели, можно значительно сократить время и ресурсы, необходимые для обучения моделей в реальном мире. Это также открывает новые возможности для более широкого использования робототехнических систем в различных прикладных областях. ## Выводы В результате данных исследований было установлено, что модели, обученные в симуляторе, могут не только совпадать с моделями, обученными на реальных данных, но и превосходить их в условиях реальной навигации. Было показано, что использо