DynaNav: Dynamic Feature and Layer Selection for Efficient Visual Navigation

## Контекст Visual navigation является ключевым заданием в области робототехники и embodied AI. Оно позволяет системам визуально изучать и взаимодействовать с окружающим миром. Несмотря на прогресс в области фундаментальных моделей, таких как transformer-based decoders, эти модели сталкиваются с значительными проблемами. Они требуют высокого вычислительного затрат и имеют ограниченную интерпретируемость, что ставит под сомнение их применение в сценариях с ограниченными ресурсами, таких как мобильные роботы в реальном времени. DynaNav предлагает решение, сфокусировавшись на эффективности и понимании результатов. ## Метод DynaNav является динамическим фреймворком для визуальной навигации, который адаптирует выбор функций и слоев в зависимости от сложности сцены. Основной компонент — trainable hard feature selector, работающий на основе спарсных операций, чтобы уменьшить вычислительные затраты. Для улучшения интерпретируемости внедрена механизм выхода задолго до конца вычислений (early-exit), где Bayesian Optimization определяет оптимальные пороги для выхода. Это динамическое решение эффективности позволяет значительно сократить объем вычислительных операций и повысить прозрачность решения. ## Результаты DynaNav протестирован на наборах данных, основанных на реальном мире и симуляционных средах. На основе результатов экспериментов, DynaNav показал существенную эффективность. Он достиг 2.26x уменьшения FLOPs, 42.3% более низкой скорости выполнения инференса и 32.8% более низкого потребления памяти, в сравнении с ViNT. В то же время, DynaNav показал улучшение показателей навигационной производительности на четырех открытых наборах данных. Эти результаты подтверждают высокую эффективность DynaNav в реальных и симуляционных сценариях. ## Значимость DynaNav широко может применяться в различных областях, включая мобильные роботы, embodied AI, и визуальный поиск. Он обеспечивает высокую эффективность, снижает нагрузку на ресурсы и повышает интерпретируемость решений. Эти преимущества делают DynaNav привлекательным для разработки систем, которым необходимо быстро реагировать в реальном времени, при этом сохраняя высокую точность. ## Выводы В результате, DynaNav представляет собой прорыв в области эффективных систем визуальной навигации. Он эффективно адаптирует выбор функций и слоев в зависимости от сложности сцены, реализуя динамическую оптимизацию и интерпретируемость. Будущие исследования будут сфокусированы на расширении функциональных возможностей DynaNav и его применении в реальных мировых задачах.