Online Clustering of Seafloor Imagery for Interpretation during Long-Term AUV Operations

2509.06678v1 cs.CV, cs.RO 2025-09-10
Авторы:

Cailei Liang, Adrian Bodenmann, Sam Fenton, Blair Thornton

Резюме на русском

## Контекст В последние годы становится все более очевидным необходимостью повышения эффективности и адаптивности работы подводных роботов (AUV) во время долгих миссий под водой. Особенно актуальным стало написание методов для реального времени анализа изображений, получаемых с днейки, для оптимизации динамических миссий и сокращения объема данных, отправляемых на поверхность. Несмотря на то, что существуют методы анализа изображений, основанные на машинном обучении, они требуют больших объемов данных и ручного маркирования примеров, что не позволяет их использовать в реальном времени. Это ограничение может привести к неэффективной работе робота и неоптимальному использованию ресурсов. ## Метод Для решения этой проблемы предлагается онлайн-фреймворк кластеризации (OCF), работающий в реальном времени и не требующий предварительной маркировки данных. Алгоритм оперирует непрерывно поступающими данными, изменяя кластеры на лету и храня семплы, которые лучше всего описывают изменения в изображениях. За счёт этого метод эффективно работает с тремя важными аспектами: самообслуживанием, адаптивностью и скалируемостью. Кроме того, OCF может разбивать и объединять кластеры без переработки всей истории изображений, что делает его вычислительно эффективным. ## Результаты OCF был оценен на трех различных подводных наборах данных, используя различные стратегии выбора сэмплов для кластеризации. Результаты показали, что OCF достиг среднего F1-меры 0.68, что является лучшим результатом среди других систем онлайн-кластеризации. Более того, система показала очень малые колебания в производительности при увеличении объема данных, что делает её высокоскалируемой и надежной в различных условиях. ## Значимость Разработанная система может использоваться в множестве приложений, включая оптимизацию автоматических операций под водой, а также в принятии решений о динамических путях роботов. Она позволяет избежать необходимости ручного маркирования данных, что значительно упрощает работу с изображениями. Благодаря её высокой скорости и ресурсоёмкости, она может быть использована в реальном времени, что повышает эффективность автономных операций. ## Выводы Результаты оценки OCF показали, что данная система является высокоэффективной и гибкой, действуя как безупречное решение для анализа подводных изображений в реальном времени. В дальнейших исследованиях будет рассматриваться модификация системы для работы в более сложных условиях, включая переменные течения и плохо покрытые области.

Abstract

As long-endurance and seafloor-resident AUVs become more capable, there is an increasing need for extended, real-time interpretation of seafloor imagery to enable adaptive missions and optimise communication efficiency. Although offline image analysis methods are well established, they rely on access to complete datasets and human-labelled examples to manage the strong influence of environmental and operational conditions on seafloor image appearance-requirements that cannot be met in real-time settings. To address this, we introduce an online clustering framework (OCF) capable of interpreting seafloor imagery without supervision, which is designed to operate in real-time on continuous data streams in a scalable, adaptive, and self-consistent manner. The method enables the efficient review and consolidation of common patterns across the entire data history in constant time by identifying and maintaining a set of representative samples that capture the evolving feature distribution, supporting dynamic cluster merging and splitting without reprocessing the full image history. We evaluate the framework on three diverse seafloor image datasets, analysing the impact of different representative sampling strategies on both clustering accuracy and computational cost. The OCF achieves the highest average F1 score of 0.68 across the three datasets among all comparative online clustering approaches, with a standard deviation of 3% across three distinct survey trajectories, demonstrating its superior clustering capability and robustness to trajectory variation. In addition, it maintains consistently lower and bounded computational time as the data volume increases. These properties are beneficial for generating survey data summaries and supporting informative path planning in long-term, persistent autonomous marine exploration.

Ссылки и действия