Is-NeRF: In-scattering Neural Radiance Field for Blurred Images

#### Контекст Neural Radiance Fields (NeRF) являются перспективной методикой для решения задач 3D-представления и генерации реалистичных изображений. Они стали одним из самых затронутых исследований в области компьютерного зрения и графики. Несмотря на их успех, существующие NeRF-модели сталкиваются с проблемами при обработке сложных сцен, в том числе освещенных событиями в кадре, например, в случае выстрелов, движения камеры или движения объектов. Эти проблемы часто приводят к геометрическим неточностям и недостатку детализации в результативных изображениях. Мотивация для разработки новой методики лежит в желании сузить разрыв между теоретическим потенциалом NeRF и его практической применимостью в решении реальных задач, особенно для обработки размытых изображений. #### Метод Для решения этих проблем вводится метод Is-NeRF (In-scattering Neural Radiance Field), который вводит возможность моделировать внешние светящиеся факторы в реальных сценах. Метод основывается на вводе новой понятия in-scattering, представляющей собой формирование изображений с целью передачи контекста освещенности, цвета и дополнительных световых эффектов. Возможность включить эти факторы позволяет обрабатывать сложные сцены, такие как размытые изображения, с более высокой точностью. Для того, чтобы обеспечить более детальную оценку полученных результатов, Is-NeRF адаптирует свое обучение с использованием адаптивной стратегии, оптимизируя не только параметры точности полигонов, но и учитывая специфику размытия. Это позволяет Is-NeRF достигать более высокого диапазона детализации, чем стандартные NeRF-модели. #### Результаты Проведенные эксперименты сравнивали Is-NeRF с несколькими современными NeRF-моделями на ряде тестовых датасетов, включающих как стандартные, так и аналитически размытые изображения. Обучив модель Is-NeRF на данных, было статистически доказано, что она не только улучшает качество изображений, но и уменьшает размытость. Эксперименты показали, что Is-NeRF выдает результаты, которые значительно превышают показатели соревнователей в детализации и цветовой точности. Использовались метрики, такие как PSNR, SSIM и LPIPS, которые подтвердили превосходство Is-NeRF по многим показателям. Эти результаты подтверждают, что Is-NeRF может эффективно обрабатывать сложные сцены, в том числе движущиеся объекты и размытые кадры. #### Значимость Метод Is-NeRF открывает новые перспективы для 3D-графики и размытости, а также имеет практическое применение в различных областях, включая визуализацию, реалистическое рендеринг и даже в области разработки систем виртуальной реальности. Одни