Inside Knowledge: Graph-based Path Generation with Explainable Data Augmentation and Curriculum Learning for Visual Indoor Navigation

#### Контекст Проблема визуальной внутренней навигации остается одной из самых сложных в области искусственного зрения. Она связана с ограниченным доступом к GPS, что приводит к необходимости использовать дополнительные источники информации. Несмотря на то, что существуют различные подходы к решению этой задачи, включая глубокое обучение, их развертывание в реальных ситуациях сталкивается с рядом проблем, таких как высокая сложность, нужда в дополнительных сенсорных системах или доступе к картам среды. Мы предлагаем более эффективный и реального времени решение, основанный на визуальном вводе, который может предсказывать направление к цели на основе изображений, съемок мобильного устройства. Наш подход значительно упрощает процесс сбора, аннотации и обучения данных, делая его автоматическим, эффективным и надежным. #### Метод Мы предлагаем использовать графовую модель для генерации путей, которая автоматически создает графы путей из данных, собранных с помощью мобильных устройств. Наш подход включает в себя три основных компонента: 1. **Curriculum Learning**: Мы используем последовательный подход к обучению, начиная с простых задач и плавно переходя к более сложным. 2. **Explainable Data Augmentation**: Мы используем специальные методы для генерации дополнительных данных, которые повышают устойчивость модели и уменьшают вероятность переобучения. 3. **Graph-Based Path Generation**: Мы генерируем граф, где узлы представляют собой различные положения в среде, а ребра представляют пути между ними. Это позволяет нашей модели быстро и эффективно определять направление к цели. #### Результаты Мы проводили эксперименты на нашем собственном датасете, состоящем из видеосъемок в помещении большого торгового центра. На каждом кадре были аннотированы правильные направления к разным целям. Мы сравнили нашу модель с другими подходами и получили значительные улучшения в точности и производительности. Наши результаты показывают, что наш подход представляет собой эффективное решение для визуальной внутренней навигации, которое может быть легко развернуто в различных средах. #### Значимость Наш подход имеет широкие области применения, включая визуальную навигацию в торговых центрах, музеях и других внутренних пространствах. Основные преимущества нашего подхода заключаются в том, что он не требует специальных сенсоров, дополнительных маркеров, карт среды или доступа к интернету. Это делает нашу модель независимой от сложности среды и позволяет развернуть ее в различных условиях. Мы считаем, что наш подход может существенно повысить удобство и эффективность внутренней нави