Progressive Bird's Eye View Perception for Safety-Critical Autonomous Driving: A Comprehensive Survey

#### Контекст Bird's-Eye-View (BEV) perception является основной парадигмой в сфере автономного вождения, обеспечивая унифицированные пространственные представления для эффективного объединения данных сенсоров и коллаборации между агентами. Однако, при переходе автономных систем из управляемых сред в реальный мир, обеспечение безопасности и надежности BEV-перцепции в условиях опасных и сложных сценариев (например, помехами, плохими погодными условиями и динамичным трафиком) остается ключевой проблемой. Настоящая статья представляет собой первую полную систематизацию BEV-перцепции с фокусом на безопасность. Она анализирует современные подходы и их использование в трех этапах развития: от моделирования на одной модели сенсоров до мультимодального и коллаборативного подхода. Также рассматриваются данные, связанные с BEV-перцепцией, из общедоступных источников, эксперименты и результаты. #### Метод Прогрессивная BEV-перцепция подразумевает три основных этапа: 1) моделирование на одной модели сенсоров, 2) мультимодальное моделирование на одной модели сенсоров, и 3) коллаборативное моделирование. Методология включает в себя внимательное изучение и анализ современных технологий, таких как многослойные перцептроны (MLPs), трансформеры и прочие сверточные сети. Она также включает в себя разработку архитектур, которые могут обрабатывать данные из различных сенсоров (радары, лидары, камеры) и объединять их в единое пространственное представление. Несколько стратегий использованы для улучшения точности, надежности и скорости вывода моделей. #### Результаты Исследование показало, что мультимодальная и коллаборативная BEV-перцепция значительно улучшают точность в сложных сценариях в сравнении с моделями на одной модели сенсоров. Эксперименты проводились на множестве общедоступных данных, таких как nuScenes, KITTI, A2D2, и др. Результаты показали, что коллаборативные модели демонстрируют наилучший результат в обнаружении объектов, при этом имеют более высокую точность и надежность в условиях помех и ограничений сенсоров. Эти модели также демонстрируют более высокую устойчивость к сенсорной деградации и сетевым задержкам. #### Значимость Данная работа имеет решающее значение для развития безопасных и надежных BEV-перцепций в автономных автомобилях, особенно при переходе с контролируемых сред к реальному миру. Она имеет широкие применения в области автоматизированных систем, включая обеспечение безопасности в транспорте, управление трафиком, а также в развитии более продвинутых технологий, таких как embodied intelligence и модели текстовых сетей. Е