3DGS-VBench: A Comprehensive Video Quality Evaluation Benchmark for 3DGS Compression

## Контекст 3D Gaussian Splatting (3DGS) — это метод, позволяющий реализовать реального времени нового просмотра с высокой визуальной точностью. Однако огромные системные требования к памяти препятствуют его распространению в практических приложениях. В связи с этим, современные алгоритмы 3DGS включают модули сжатия, которые позволяют сократить объем необходимой памяти. Однако эти сжимающие техники вводят уникальные дефекты, которые еще не подробно исследованы в полезных системах. Для снятия этого препятствия, мы разработали 3DGS-VBench — большую коллекцию видео-качественной оценки (VQA), содержащую 660 сжатых 3DGS-моделей и видео-последовательности, полученные из 11 сцен с использованием 6 современных 3DGS-алгоритмов с различными параметрами. ## Метод 3DGS-VBench был разработан с целью постановки конкретных проблем для компрессии 3DGS с разными параметрами. Мы использовали 6 алгоритмов сжатия 3DGS, примененные к 11 сценам, и готовили 660 видео-последовательностей. Для каждой последовательности мы провели экспериментные оценки с 50 участниками, которые дали свои оценки по Мотивационному Отношению (MOS). После отбора выбросов мы получили надежные результаты, которые позволяют оценить эффективность сжатия и качество визуализации с использованием разных методов. ## Результаты Мы проверили 6 алгоритмов сжатия 3DGS, оценив их эффективность в хранении и качество визуализации на основе 15 методик оценки качества. Наши результаты показали, что каждый алгоритм имеет свои сильные стороны и слабые места, что дает возможность выбрать наиболее подходящий для конкретной задачи. Благодаря нашему новому бенчмарку, мы можем проводить специализированные эксперименты для развития методов сжатия и качества видео. ## Значимость 3DGS-VBench может быть применен в различных областях, таких как искусственный интеллект, виртуальная реальность и мобильные приложения. Он предоставляет новые возможности для развития методов сжатия и качества видео, позволяя разработчикам сфокусироваться на точных и целевых экспериментах. Мы видим, что наш бенчмарк может стать ключевым инструментом для повышения эффективности сжатия и видео-качества в 3DGS. ## Выводы Мы разработали 3DGS-VBench, который является первым подобным бенчмарком для оценки качества видео в 3DGS. Наши результаты демонстрируют значительные достижения в области сжатия и качества видео. Наша работа открывает новые пути для будущих исследований в этой области, способствуя повышению качества 3DGS-компрессии и видео-процессинга.