📊 Статистика дайджестов
Всего дайджестов: 34022 Добавлено сегодня: 0
Последнее обновление: сегодня
Авторы:
Lianjun Liao, Chunhui Zhang, Tong Wu, Henglei Lv, Bailin Deng, Lin Gao
#### Контекст
Изображения, сфотографированные на открытом воздухе, часто охватывают бесконечные сцены с непоследовательными, меняющимися условиями освещения. Это препятствует разделению этих сцен на геометрию, отражение и освещение. Недавние работы, основанные на Neural Radiance Fields (NeRF) или 3D Gaussian Splatting (3DGS), сталкиваются с проблемами высокого вычислительного накладываемого веса и низкочастотной моделью освещения, что приводит к неэффективному рендерингу и неточности в обратном освещении. Наша мотивация заключается в создании более эффективной и точной модели для построения и освещения внешних сцен.
#### Метод
Предлагаемая ROSGS-модель состоит из двух этапов. На первом этапе используется 2D Gaussian Splatting (2DGS) для определения геометрии сцены с помощью монокулярных нормальных привязок. Этот шаг обеспечивает эффективную и точную модель геометрии. На втором этапе, основываясь на полученной геометрии, мы применяем гибридную модель освещения. Для дирекционного солнечного освещения используется сферическая Гауссова функция, а для остальной низкочастотной части света — сферические Коэффициенты Шаря (Spherical Harmonics). Эта модель позволяет получить более точное и эффективное представление освещения.
#### Результаты
Мы провели эксперименты на стандартных датасетах для сравнения с другими моделями. Результаты показали, что ROSGS превосходит конкуренты в задаче обратного освещения, предоставляя точные результаты и эффективную обработку. Мы также провели сравнение с NeRF и 3DGS на реальных сценах, подтвердив, что наша модель предоставляет более высокое качество рендеринга и эффективность.
#### Значимость
Модель ROSGS может применяться в различных областях, включая виртуальную реальность, игры, а также в задачи анимации и моделирования внешних сцен. Основные преимущества заключаются в высокой точности в обратном освещении, эффективности рендеринга и широком применении в реальных задачах. Мы видим потенциал для её использования в сфере виртуальных интерфейсов, симуляции внешних пространств и даже в графике компьютерных игр.
#### Выводы
Предложенная модель ROSGS достигла нового уровня качества в обратном освещении внешних сцен, превосходя конкурентов по точности и эффективности. Мы также отметили необходимость будущих исследований в области улучшения гибридных моделей освещения и их применения в реальных сценах с более сложными условиями.
Annotation:
Image data captured outdoors often exhibit unbounded scenes and
unconstrained, varying lighting conditions, making it challenging to decompose
them into geometry, reflectance, and illumination. Recent works have focused on
achieving this decomposition using Neural Radiance Fields (NeRF) or the 3D
Gaussian Splatting (3DGS) representation but remain hindered by two key
limitations: the high computational overhead associated with neural networks of
NeRF and the use of low-frequency lighting represe...