UnPose: Uncertainty-Guided Diffusion Priors for Zero-Shot Pose Estimation

## Контекст Оценка 6D-позы новых объектов является важной задачей в робототехнике, но требует доступа к CAD-моделям, которые могут быть дорогостоящими и непрактичными в получении. Существующие подходы пытаются обойти эту проблему с использованием мощных предварительно обученных диффузионных моделей для реконструкции объектов из одного или нескольких видов изображений. Однако, эти подходы часто требуют дополнительного обучения или приводят к халтурной геометрии. Было предложено UnPose — новый фреймворк для нулевого-сна-позиционирования 6D-позы и реконструкции 3D-модели, который использует 3D-признаки и оценки неопределенности, полученные от предварительно обученной диффузионной модели. ## Метод UnPose начинает с построения исходной 3D-модели с использованием 3D-гауссовского размытия (3DGS) на основе одного RGB-D-фрейма. Затем, этот 3DGS-репрезентация обновляется с использованием дополнительных видов изображений, при помощи 3D-гауссовского моделирования, которое использует оценки неопределенности, изданных диффузионной моделью. Этот процесс повторяется для каждого нового вида, чтобы построить конечный 3DGS-поле. Чтобы обеспечить глобальную консистентность, все виды изображений и их оценки неопределенности графически организованы в структуру позы и оптимизируются вместе. Этот подход позволяет достичь высокой точности позиционирования и качества реконструкции. ## Результаты Исследования показали, что UnPose значительно превосходит другие подходы в точности 6D-позиционирования и качестве реконструкции 3D-модели. Эксперименты проводились на стандартных датасетах, и результаты демонстрируют значительную улучшенность в сравнении с текущими методами. Также, UnPose продемонстрировал свою эффективность в реальных задачах робототехники, таких как рукоподъемные операции. ## Значимость UnPose может быть применен в различных областях, включая робототехнику, виртуальную реальность и глубокое обучение. Он предлагает преимущества, такие как необходимость не обучать модели заново и получение качественной 3D-реконструкции. Это может открыть новые возможности для 6D-позиционирования в реальном времени и для широкого диапазона задач, требующих точного понимания среды. ## Выводы UnPose представляет собой новый подход к 6D-позиционированию и 3D-реконструкции, который не требует дополнительных обучающих данных и обеспечивает высокую точность и качество. Он демонстрирует перспективы для решения задач робототехники, а также для других областей, где необходима точная реконструкция и