Stereovision Image Processing for Planetary Navigation Maps with Semi-Global Matching and Superpixel Segmentation
2509.05645v1
astro-ph.IM, astro-ph.EP, cs.CV, cs.RO
2025-09-10
Авторы:
Yan-Shan Lu, Miguel Arana-Catania, Saurabh Upadhyay, Leonard Felicetti
Резюме на русском
#### Контекст
Марсианская экспедиция требует точных и надёжных моделей ландшафта для безопасного движения ровера по непредсказуемым и опасным марсовым ландшафтам. Звездочное зрение (стереовидение) играет важную роль в перцепции ровера, позволяя воссоздавать сцену с помощью глубинных карт, полученных с помощью стерео-матчинга. Для построения террейнов на Марсе используется традиционный метод местного блочного матчинга, который аггрегирует затраты в пределах квадратных окон и улучшает диспаритеты с помощью ограничений гладкости. Однако этот подход сталкивается с трудностями при работе с низко-текстурными изображениями, косвенностью и повторяющимися мотивами, потому что он учитывает только ограниченное количество соседних пикселей и не обладает широким контекстом сцены. В данной работе предлагается использовать Semi-Global Matching (SGM) совместно с сегментацией на суперпикселах для устранения вкраплений блоков и восстановления утерянных деталей.
#### Метод
Метод основывается на использовании Semi-Global Matching (SGM) с сегментацией на суперпикселах для рефинирования диспаритета. Он совмещает быстродействие SGM с контекстно-связанной сегментацией, чтобы обеспечить более корректные оценки глубины. Суперпикселы позволяют группировать пикселы с одинаковыми характеристиками, чтобы уменьшить шум и сгладить локальные искажения. SGM, в свою очередь, обеспечивает точность матчинга по всему изображению, включая зоны с низким контрастом или репититивными мотивами. Рефинирование суперпикселов устраняет блочные артефакты и повышает точность моделирования ландшафта. Эта архитектура предлагает более устойчивую и эффективную систему для построения моделей террейна, необходимых для автономного управления ровером на Марсе.
#### Результаты
Данный подход был тестирован на трёх наборах данных, включая аналог марсианского ландшафта. Результаты показали улучшение консистентности структур, особенно в регионах с большим уклоном или вхождением объектов. Метод позволил сократить большие дыры задней стороны камней, которые характерны для сырых диспаритетных карт, и предоставил более точные детали, такие как мелкие камни и границы. В двух дополнительных наборах данных, использованных для оценки генеральной значимости и адаптивности метода, полученные диспаритетные карты были более точны, а террейны более стабильны. Эти достижения демонстрируют высокую конкурентоспособность полученных результатов по обеим метрикам ошибок: необходимости и полной карты.
#### Значимость
Предложенный подход может быть применён в про
Abstract
Mars exploration requires precise and reliable terrain models to ensure safe
rover navigation across its unpredictable and often hazardous landscapes.
Stereoscopic vision serves a critical role in the rover's perception, allowing
scene reconstruction by generating precise depth maps through stereo matching.
State-of-the-art Martian planetary exploration uses traditional local
block-matching, aggregates cost over square windows, and refines disparities
via smoothness constraints. However, this method often struggles with
low-texture images, occlusion, and repetitive patterns because it considers
only limited neighbouring pixels and lacks a wider understanding of scene
context. This paper uses Semi-Global Matching (SGM) with superpixel-based
refinement to mitigate the inherent block artefacts and recover lost details.
The approach balances the efficiency and accuracy of SGM and adds context-aware
segmentation to support more coherent depth inference. The proposed method has
been evaluated in three datasets with successful results: In a Mars analogue,
the terrain maps obtained show improved structural consistency, particularly in
sloped or occlusion-prone regions. Large gaps behind rocks, which are common in
raw disparity outputs, are reduced, and surface details like small rocks and
edges are captured more accurately. Another two datasets, evaluated to test the
method's general robustness and adaptability, show more precise disparity maps
and more consistent terrain models, better suited for the demands of autonomous
navigation on Mars, and competitive accuracy across both non-occluded and
full-image error metrics. This paper outlines the entire terrain modelling
process, from finding corresponding features to generating the final 2D
navigation maps, offering a complete pipeline suitable for integration in
future planetary exploration missions.