Radar-Based NLoS Pedestrian Localization for Darting-Out Scenarios Near Parked Vehicles with Camera-Assisted Point Cloud Interpretation

2508.04033v1 cs.CV, eess.SP 2025-08-09
Авторы:

Hee-Yeun Kim, Byeonggyu Park, Byonghyok Choi, Hansang Cho, Byungkwan Kim, Soomok Lee, Mingu Jeon, Seung-Woo Seo, Seong-Woo Kim

Резюме на русском

**Резюме** Проблема невидимых (NLoS) областей возле паркованных автомобилей в урбанизированных пространствах характеризуется возможностью непредвиденного появления пешеходов, что увеличивает риск дорожно-транспортных происшествий. Мм-волновая технология позволяет обнаруживать объекты за труднодоступными преградами, но существующие подходы ограничиваются простыми моделями отражений или предварительно сформированными спатехическими моделями. Эти ограничения становятся особенно острыми при неожиданном появлении пешеходов из-за парковок. Мы предлагаем фреймворк, объединяющий 2D-радарную точечную сетку (PCD) с монокурсорной камерой для обнаружения и локализации пешеходов в NLoS-областях. Метод вначале использует изображение для распознавания парковок, далее оценивает глубину для приближенной интерпретации пространства и, наконец, использует радар-данные для точного расположения пешеходов. Эксперименты в реальных условиях показали, что этот подход улучшает раннее обнаружение пешеходов и помогает повысить дорожно-транспортную безопасность.

Abstract

The presence of Non-Line-of-Sight (NLoS) blind spots resulting from roadside parking in urban environments poses a significant challenge to road safety, particularly due to the sudden emergence of pedestrians. mmWave technology leverages diffraction and reflection to observe NLoS regions, and recent studies have demonstrated its potential for detecting obscured objects. However, existing approaches predominantly rely on predefined spatial information or assume simple wall reflections, thereby limiting their generalizability and practical applicability. A particular challenge arises in scenarios where pedestrians suddenly appear from between parked vehicles, as these parked vehicles act as temporary spatial obstructions. Furthermore, since parked vehicles are dynamic and may relocate over time, spatial information obtained from satellite maps or other predefined sources may not accurately reflect real-time road conditions, leading to erroneous sensor interpretations. To address this limitation, we propose an NLoS pedestrian localization framework that integrates monocular camera image with 2D radar point cloud (PCD) data. The proposed method initially detects parked vehicles through image segmentation, estimates depth to infer approximate spatial characteristics, and subsequently refines this information using 2D radar PCD to achieve precise spatial inference. Experimental evaluations conducted in real-world urban road environments demonstrate that the proposed approach enhances early pedestrian detection and contributes to improved road safety. Supplementary materials are available at https://hiyeun.github.io/NLoS/.

Ссылки и действия