Symmetry Understanding of 3D Shapes via Chirality Disentanglement

2508.05505v1 cs.CV 2025-08-09
Авторы:

Weikang Wang, Tobias Weißberg, Nafie El Amrani, Florian Bernard

Резюме на русском

В статье **"Symmetry Understanding of 3D Shapes via Chirality Disentanglement"** рассматривается проблема анализа симметрии трехмерных объектов, где существующие дескрипторы не полностью учитывают чиральность (информацию о различии левого и правого симметричных частей). Для решения этой проблемы предложена нейросетевая модель, основанная на Diff3F-фреймворке, реализующая нейронную сеть, которая учитывает чиральность в процессе извлечения фичей для трехмерных моделей. Модель обучается с помощью 2D-фундаментальных моделей и декодирует чиральные признаки для 3D-моделей. Оценка модели проводилась на различных данных, включая сетки и точечные облака, используя задачи типа left-right disentanglement, shape matching и part segmentation. Результаты показали эффективность нового подхода в обработке чиральных признаков и подтвердили его практическую полезность в различных задачах анализа трехмерных моделей.

Abstract

Chirality information (i.e. information that allows distinguishing left from right) is ubiquitous for various data modes in computer vision, including images, videos, point clouds, and meshes. While chirality has been extensively studied in the image domain, its exploration in shape analysis (such as point clouds and meshes) remains underdeveloped. Although many shape vertex descriptors have shown appealing properties (e.g. robustness to rigid-body transformations), they are often not able to disambiguate between left and right symmetric parts. Considering the ubiquity of chirality information in different shape analysis problems and the lack of chirality-aware features within current shape descriptors, developing a chirality feature extractor becomes necessary and urgent. Based on the recent Diff3F framework, we propose an unsupervised chirality feature extraction pipeline to decorate shape vertices with chirality-aware information, extracted from 2D foundation models. We evaluated the extracted chirality features through quantitative and qualitative experiments across diverse datasets. Results from downstream tasks including left-right disentanglement, shape matching, and part segmentation demonstrate their effectiveness and practical utility. Project page: https://wei-kang-wang.github.io/chirality/

Ссылки и действия