ManiVID-3D: Generalizable View-Invariant Reinforcement Learning for Robotic Manipulation via Disentangled 3D Representations

## Контекст Одна из основных проблем в области визуального управления роботами заключается в том, что политики, обученные в условиях фиксированного камерного перспективного представления, часто неэффективны при перемещении камеры. Это становится критично в реальных условиях, где расположение датчиков трудно контролировать. Таким образом, необходимо создать методы, которые бы учитывали эту сложность, обеспечивая стабильность и надежность во время выполнения манипуляций. ## Метод Мы предлагаем ManiVID-3D, новый 3D-RL-архитектура, ориентированная на обучение view-invariant (независимых от точки зрения) представлений с использованием самостоятельного обучения (self-supervised) и дисентгрализации признаков. Центральной частью этого подхода является ViewNet, модуль, который автоматически выравнивает точечные облака наблюдений в едином пространстве координат, не требуя внешней калибровки. Для ускорения обучения мы также разработали GPU-акселерацию, обрабатывающую более 5000 кадров в секунду, что позволяет развивать 3D-визуальные модели с повышенной скоростью. ## Результаты Мы провели эксперименты на 10 симуляторных и 5 реальных задачах, сравнив ManiVID-3D с другими подходами. Наши результаты показали выигрыш в 44.7% в условиях перемены точки зрения, при этом используя 80% меньше параметров. Это подтверждает эффективность нового подхода в обучении роботов в условиях сильных перспективных перемен. ## Значимость Метод ManiVID-3D может использоваться в реальном мире для улучшения визуально-рефорсментной системы управления роботами. Он предлагает высокую скорость тренировки, высокую устойчивость к переменам точки зрения и высокую степень универсальности. Это открывает новые возможности для общей робототехники, а также для систем, работающих в нестандартных условиях. ## Выводы Мы доказали, что ManiVID-3D значительно улучшает стабильность и эффективность роботов в различных условиях. Наша работа открывает новые пути для исследований в области обучения роботам в нестандартных условиях, включая улучшение обработки точечных облаков и развитие универсальных RL-политик. Мы планируем расширить применение этой модели к более сложным задачам и ситуациям в реальном мире.