Articulated Object Estimation in the Wild

#### Контекст Изучение трёхмерного движения и моделирование отдельных частей (articulated objects) играет ключевую роль в области робототехники, в том числе в сценарных распознаваниих, мобильном манипулировании и планировании движения. Несмотря на прогресс в области нейросетевых моделей, существующие подходы требуют стабильных камерных видов и чётко заданных объектных состояний, что ограничивает их применение в реальных, нестандартных условиях. В то же время, люди эффективно интерпретируют движение и отдельные части объектов, даже при плохом видении или изменениях положения камеры. Эта способность вдохновила разработку нового фреймворка для распознавания отдельных частей объектов в реальных условиях, учитывающих динамический ход камеры и неполные данные. #### Метод Предлагаемый фреймворк ArtiPoint основывается на сочетании глубокого анализа потока точек (deep point tracking) и оптимизации факторной сетки (factor graph optimization). Он позволяет проанализировать беспрерывные RGB-D видео и извлечь траектории частей объекта, а также параметры их отделимости (articulation axes). Данный подход предназначен для оптимизации под неидеальные условия, включая динамические перемещения камеры и полноугольные модели объектов. Таким образом, ArtiPoint имеет высокую точность и устойчивость в сценах с большим количеством движения и сложными интерфейсами. #### Результаты Эксперименты проводились на новой эгоцентрической датасете Arti4D, который включает в себя видео сцен с трёхмерными положениями объектов и их движений. ArtiPoint показал существенно более высокую точность по сравнению с классическими и нейросетевыми базлами. Он подходит для анализа сложных движений и взаимодействий, особенно в сценах с нестабильным видом или частичной информацией. Результаты показывают, что ArtiPoint превосходит в размере погрешности и стабильности другие подходы. #### Значимость Предлагаемый подход может быть применён в областях, таких как мобильное манипулирование, робототехническое планирование и сценарное распознавание. Особенно он полезен для ситуаций, когда объект неполностью виден, или при отсутствии статического расположения камеры. Это открывает новые возможности для роботов, работающих в реальных условиях, например, для роботов-мультиплексоров или роботов участвующих в сценарной работе. #### Выводы ArtiPoint ставит новый акцент на распознавание отдельных частей объектов в нестандартных условиях, используя глубокую аналогию с человеческим восприятием. Это является значительным прорывом в области робототехники и сценарного распознавания. Будущие исследования будут фокусироваться на улучшении точ