Polarization Denoising and Demosaicking: Dataset and Baseline Method
2509.10098v1
eess.IV, cs.CV
2025-09-16
Авторы:
Muhamad Daniel Ariff Bin Abdul Rahman, Yusuke Monno, Masayuki Tanaka, Masatoshi Okutomi
Резюме на русском
## Контекст
Дивизион-оф-фокаль-плане (DoFP) поляриметр позволяет получать изображения с несколькими ориентациями поляризации в один кадр, что делает его неоцениваемым для приложений, использующих поляризированную информацию. Однако обработка таких изображений требует выполнения двух важных задач: денойсинга и демосайкинга. Хотя задача демосайкинга для шумо-свободных изображений получила достаточное внимание, проблема их совместного решения (денойсинга и демосайкинга) все еще остается недостаточно изученной. Это обусловлено отсутствием подходящего датасета и решения, которое можно использовать в качестве референса. Мы предлагаем новую модель и датасет, которые могут стать основополагающим подходом для выполнения этих задач.
## Метод
Мы предлагаем уникальный новый подход к задачам поляризационного денойсинга и демосайкинга. Наша модель основывается на принципах сигнального процессинга и использует разделение задач на два этапа: денойсинг, затем демосайкинг. Мы использовали три уровня шума для симуляции реальных условий. Для того, чтобы обеспечить повторяемость исследований, мы создали датасет, содержащий 40 реальных сцен, как с шумом, так и без шума. Это позволяет проверить нашу модель в различных условиях и сравнить ее с другими методами.
## Результаты
Мы провели эксперименты с использованием нашего датасета и сравнили нашу модель с другими алгоритмами. Наши результаты показывают, что наш подход дает лучшие результаты в задаче денойсинга и демосайкинга поляризационных изображений в сравнении с другими методами. Мы также проверили нашу модель на реальных снимках и получили высокую точность в построении полного изображения.
## Значимость
Наша модель может применяться в различных областях, таких как космос, инфракрасная съемка, а также в области видеонаблюдения. Особенно значима ее значимость в ситуациях, когда требуется быстрая и точная обработка поляризированных изображений. Наш подход предоставляет новый стандарт для данной задачи, что позволяет улучшить качество изображений в реальном времени. Мы также планируем продолжать работу над улучшением нашей модели, в том числе добавлением более сложных условий и задач.
## Выводы
Мы представили новый датасет и подход к задачам денойсинга и демосайкинга поляризационных изображений. Наши результаты показали, что наш подход является оптимальным в сравнении с другими методами. Мы также подчеркнули значимость нашего датасета для последующих исследований в этой области. В будущем мы планируем расширить нашу модель для выполнения более сложных задач обработки поляризированных изоб
Abstract
A division-of-focal-plane (DoFP) polarimeter enables us to acquire images
with multiple polarization orientations in one shot and thus it is valuable for
many applications using polarimetric information. The image processing pipeline
for a DoFP polarimeter entails two crucial tasks: denoising and demosaicking.
While polarization demosaicking for a noise-free case has increasingly been
studied, the research for the joint task of polarization denoising and
demosaicking is scarce due to the lack of a suitable evaluation dataset and a
solid baseline method. In this paper, we propose a novel dataset and method for
polarization denoising and demosaicking. Our dataset contains 40 real-world
scenes and three noise-level conditions, consisting of pairs of noisy mosaic
inputs and noise-free full images. Our method takes a
denoising-then-demosaicking approach based on well-accepted signal processing
components to offer a reproducible method. Experimental results demonstrate
that our method exhibits higher image reconstruction performance than other
alternative methods, offering a solid baseline.
Ссылки и действия
Дополнительные ресурсы: