## Контекст В последнее десятилетие, визуально-языковые модели стали одним из основных направлений в искусственном интеллекте. Они позволяют агентам визуально-языковых моделей (VLA) воспринимать визуальные сигналы и текстовые команды для точного прогнозирования динамики действий в реальных и виртуальных средах. Однако существуют некоторые проблемы, связанные с недостаточным пониманием спatial и temporal аспектов. Несмотря на то, что ранее разработанные подходы привносили улучшения, они по-прежнему сталкиваются с ограничениями в данных и сложностью внедрения этих подходов для решения реальных задач. Этот факт мотивирует разработку более эффективных методов, которые могут объединить spatial и temporal с той же степенью эффективности. ## Метод Метод Spatial Traces состоит в том, чтобы проецировать ключевые точки, отслеживаемые на входных визуальных кадрах, на depth maps (глубинные карты). Это происходит с помощью технологии visual prompting, которая интегрирует spatial и temporal слои в одном процессе. Модель получает входные данные в виде глубинных карт и текстовых признаков, а затем выполняет последовательное обучение, чтобы обеспечить одновременное понимание пространственных и временных зависимостей. Была разработана архитектура, включающая convolutional layers для обработки depth maps и transformer-based encoder для обработки текстовых данных. Эта методика позволяет улучшить прогнозирование действий в пространстве и времени, объединяя их в единую модель. ## Результаты Эксперименты проводились на SimplerEnv, где использовались данные, содержащие визуальные сигналы и текстовые команды. Модель Spatial Traces показала значительное улучшение в процессе решения задач в сравнении с двумя конкурирующими моделями: SpatialVLA и TraceVLA. Для Spatial Traces, mean success rate увеличился на 4% в сравнении с SpatialVLA и на 19% в сравнении с TraceVLA. Кроме того, Spatial Traces показала высокую точность при минимальном количестве данных для обучения, что делает её привлекательной для реальных сценариев, где сбор данных может быть ограниченным. ## Значимость Этот подход может быть применен в различных областях, таких как robotics, augmented reality, и computer vision. Он позволяет улучшить точность прогнозирования динамики в средах, где spatial и temporal данные имеют важное значение. Благодаря тому, что модель показала высокую эффективность с минимальным объемом данных, она может стать ключевым инструментом для решения задач в реальном мире, где сбор данных может быть сложным. ## Выводы В ходе работы был разработан метод, который улучшает точность прогнозирования действий в пространстве и времени, объединяя spatial и temporal слои в единой модели. Этот подход продемонстрировал существенное улучшение производительности в сравнении с подходами, которые работают с spatial и temporal данными отдельно

## Контекст Подвижность городов в настоящее время крайне зависит от инновационных технологий, способных обеспечить безопасность, эффективность и доступность транспортных систем. Одной из ключевых задач в области автономного вождения является создание надежных и устойчивых политик прохождения маршрутов с помощью обучения на основе данных. Однако использование реальных данных для обучения в реальном времени часто оказывается небезопасным и непрактичным. Большинство алгоритмов, основанных на Behavioral Cloning (BC), сталкиваются со сложностями в задаче копирования поведения эксперта, включая неустойчивость и ошибки, ускоряющиеся в замкнутых контрольных циклах. Это выделяет необходимость в разработке более устойчивых и оптимизированных подходов для обучения политик вождения. ## Метод Для развития эффективных политик вождения предлагается модель, основанная на Behavioral Cloning (BC), которая использует трансформеры для обработки структурированных, сущность-ориентированных представлений состояния. Эта модель достигает низкого уровня имитационной потери, но не справляется с длинными горизонтами симуляций. Для улучшения устойчивости используется алгоритм Conservative Q-Learning (CQL) в качестве метода Offline Reinforcement Learning (Offline RL). CQL применяется к той же структуре представления состояния, что и BC, но добавляет консервативную функцию значений, способную обеспечить более устойчивое поведение в реальных ситуациях. Эта модель также включает в себя настраиваемую функцию награды, которая помогает агенту избегать ошибок и выходов за допустимые состояния. ## Результаты В ходе экспериментов проводилась сравнительная оценка различных вариантов BC с трансформером и CQL на основе реальных данных. Результаты показали, что CQL не только увеличивает устойчивость политик, но и существенно повышает эффективность. Например, CQL демонстрирует 3.2 раза более высокую стабильность и 7.4 раз меньшую частоту столкновений по сравнению с лучшими результатами BC на 1,000 неизвестных сценах из Waymo Open Motion Dataset. Это демонстрирует, что Offline RL значительно превосходит BC в обучении политик для длинных горизонтов вождения. ## Значимость Предлагаемый подход может быть применен в различных сценариях автономного вождения, включая дорожные системы, парковки и управление транспортом. Он обеспечивает высокую устойчивость, снижает риск столкновений и повышает эффективность в различных реальных условиях. Это открывает новые возможности для безопасного и эффективного использования автономных систем в транспортных системах. ## Выводы Результаты показали, что Offline Reinforcement Learning, особенно CQL, является к

## Контекст Область исследования, связанная с embodied AI, занимает внимание в связи с развитием бо LLM и их применения в сценариях, требующих взаимодействия с окружением. Особое внимание уделяется сценариям навигации, где системы должны перемещаться в незнакомой среде, ориентируясь на цель. Однако эти системы встречаются с рядом проблем, в том числе техническими и безопасностными. Необходимость обеспечить безопасность таких систем поднимается из-за того, что они работают в динамичных реальных условиях, где их поведение может иметь значительное влияние. Мотивация для данного исследования лежит в том, чтобы изучить состояние знаний по безопасности embodied navigation, а также выявить главные проблемы и направления повышения эффективности и надежности таких систем. ## Метод Для изучения проблем безопасности embodied navigation был проведен разносторонний анализ, включающий в себя изучение атак, методов защиты, методов оценки и метрик. В качестве решения использовались существующие методологии, а также были включены данные и метрики, которые позволяют оценивать уровень безопасности и надежности систем. Технические решения включали в себя исследование механизмов защиты, предназначенных для обеспечения устойчивости и надежности в динамичных условиях. Также были рассмотрены различные архитектуры и модели, которые могут применяться для решения проблем в области безопасности embodied navigation. ## Результаты В ходе исследования проведены эксперименты, которые оценивали уровень безопасности различных систем навигации. Использовались различные данные, включая синтетические и реальные сцены навигации. Эксперименты позволили получить результаты, отражающие уровень устойчивости систем к различным типам атак, а также определить сильные и слабые стороны текущих методов защиты. Особое внимание было уделено оценке метрик, используемых для измерения эффективности и надежности систем. Результаты показывали, что некоторые методы обеспечения безопасности дают значительный прогресс, но некоторые проблемы все еще остаются неразрешенными. ## Значимость Результаты исследования могут быть применены в различных областях, в том числе в сфере автономных транспортных систем, в развитии систем для управления беспилотными летающими аппаратами, в сфере робототехники и в области виртуальной реальности. Основное преимущество методов, рассмотренных в исследовании, заключается в том, что они позволяют увеличить уровень надежности и безопасности, что может иметь значительное влияние на развитие индустрии. Также, найденные проблемы и пути их решения могут привести к раз

## Контекст В последние годы автономное водительство стало востребованным направлением исследований, в связи с потребностью в безопасных, эффективных и автономных транспортных системах. Однако существуют несколько проблем, связанных с модульными подходами. Они обладают высоким уровнем интерпретируемости, но часто сталкиваются с проблемами ошибок в процессе передачи данных и сложностями синхронизации различных модулей. Энд-то-энд (end-to-end) подходы, в свою очередь, упрощают дизайн системы, но часто сталкиваются с проблемами вычислительных ограничений. Методы, использующие bird's-eye view (BEV), становятся все более популярными в силу их способности предоставлять компактное представление окружающих объектов и дорожной среды, что позволяет эффективно использовать информацию. Наша мотивация заключается в создании усовершенствованного подхода, который объединяет преимущества BEV-представления с мощным аппаратом глубокого учёта на основе DRL. ## Метод Мы предлагаем **ME$^3$-BEV**, новую модель, которая использует глубокий учёт на основе DRL для управления автомобилем в реальном времени. Основной компонентом является **Mamba-BEV**, модель, основанная на BEV-представлении, которая способна эффективно извлекать и объединять спектр спектров временных признаков. Сеть **Mamba-BEV** создана для того, чтобы объединить BEV-представление с помощью Mamba-фреймворка для моделирования хронологических признаков, что позволяет системе более точно понять и моделировать длинные зависимости в окружающих объектах. Мы также интегрировали методы визуализации высокоразмерных признаков с помощью семантической сегментации, что позволяет более ясно понять, что именно модель учитывает при принятии решений. Модель **ME$^3$-BEV** использует **Mamba-BEV** в качестве входной структуры для DRL, что дает более высокую точность в динамичных ситуациях на дорогах. ## Результаты Мы проводили эксперименты на **CARLA Simulator**, где получили результаты, показывающие высокую эффективность нашего подхода. Модель **ME$^3$-BEV** демонстрирует значительное сокращение количества столкновений и улучшение точности траекторий по сравнению с существующими алгоритмами. Также было показано, что наш подход обеспечивает более высокую эффективность в обработке данных и снижение времени реакции, что важно для реального времени. Мы также показали, что визуализации с помощью семантической сегментации повышают интерпретируемость модели, что делает её более доступной для исследователей и разработчиков. ## Значимость Мы видим, что **ME$^3$-BEV** может быть применено в опе

Детектирование пешеходов в условиях Non-Line-of-Sight (NLoS) — ключевая проблема для систем автоматизированного вождения, особенно в сложных транспортных ситуациях, таких как T-пересечения. Несмотря на то что мм-волновые радары оказываются эффективными для обнаружения объектов в таких ситуациях, их 2D-пространственная модель (PCD) часто подвержена деформациям из-за многопутных отражений, что снижает точность расположения объектов. Другой подход, основанный на использовании камер, может обеспечить высококачественные изображения, но их недостаток в глубинном видении затрудняет определение геометрии среды. Мы предлагаем новую систему, которая объединяет 2D-данные радара с интерпретацией 3D-сцены, полученной из изображений камеры. Эта система позволяет восстановить пространственную модель для точного расположения пешеходов в NLoS-регионах. Эксперименты на реальном транспортном средстве показали, что предложенный подход достаточно эффективен для решения данной задачи в реальных условиях.

Научная статья "Beyond Policy Optimization: A Data Curation Flywheel for Sparse-Reward Long-Horizon Planning" рассматривает проблему применения Large Language Reasoning Models в средах с многократным взаимодействием и неполными подсказками. Основные трудности — недостаточная кредитная ассигнования в условиях дешевых наград и высокая сложность обработки длинных цепочек рассуждений. Авторы предлагают BPO — рамфркм, основанный на трех этапах: бутстрапинг, курсумлернинг и рефинирование. Он использует планирование с помощью логических кватернионов и цепочек мышления, стратегическое обучение по сложности, а также выбор опытов с помощью реварда-гейтетированной отборки. Эксперименты показали, что BPO дает новый подход к решению задач многошагового планирования в противоречивых и сложных средах, устанавливая новый стандарт в этой области.