Novel View Synthesis with Gaussian Splatting: Impact on Photogrammetry Model Accuracy and Resolution

## Контекст Одной из важнейших проблем в области компьютерного зрения и графики является точное воссоздание и визуализация трёхмерных сцен. Традиционные методы, такие как фотограмметрия, часто сталкиваются с ограничениями в сфере качества и резолюции моделей. Из-за этого возникает необходимость в разработке новых технологий, которые могут улучшить качество и полноту воспроизведения сцен. Метод **Gaussian Splatting**, основанный на распределении Гаусса, показал свою эффективность в создании высококачественных трёхмерных моделей. Однако, есть необходимость провести подробные сравнительные исследования, чтобы определить его эффективность по сравнению с традиционными методами, такими как фотограмметрия. ## Метод Для исследования был создан набор данных, состоящий из реальных съёмок сцены. Для сбора данных использовались камеры с разным разрешением. Модели 3D были созданы используя два метода: **фотограмметрия** и **Gaussian Splatting**. Для оценки качества трёхмерных моделей были применены метрики, такие как **SSIM** (Structural Similarity Index), **PSNR** (Peak Signal-to-Noise Ratio) и **LPIPS** (Learned Perceptual Image Patch Similarity). Также, для оценки резолюции использовался **USAF resolution chart**. Для достижения более высокого качества воспроизведения новых видений, была разработана усовершенствованная версия репозитория **Gaussian Splatting**, которая позволяет рендерить изображения из новых точек зрения, сгенерированных в среде **Blender**. ## Результаты Были проведены сравнительные эксперименты, используя созданные модели 3D. Результаты показали, что **Gaussian Splatting** превосходит фотограмметрию в плане качества и резолюции воспроизведения моделей. Метрики SSIM, PSNR и LPIPS показали значительное улучшение качества моделей, созданных с использованием Gaussian Splatting. Также, **USAF resolution chart** показал, что **Gaussian Splatting** обеспечивает лучшую резолюцию, чем фотограмметрия. Была также проведена сравнительная оценка новых моделей, построенных с использованием оригинальных изображений и новых видов, полученных с помощью **Gaussian Splatting**. Это позволило показать, что **Gaussian Splatting** может значительно улучшить качество моделей, строящихся на основе фотограмметрии. ## Значимость Результаты этого исследования имеют большое значение в различных областях, таких как **XR (extended reality)**, **автономные системы навигации** и **фотограмметрия**. Улучшение качества и резолюции моделей позволяет повысить эффективность виртуальных и расширенных реальностей, а также обеспечить более точную навигацию в автономных системах. Более того, разработанная модификация **Gaussian Splatting** предоставляет новые возможности для рендеринга высококачественных новых видов, что может иметь будуще