Lightweight and Fast Real-time Image Enhancement via Decomposition of the Spatial-aware Lookup Tables
2508.16121v1
eess.IV, cs.CV
2025-08-26
Авторы:
Wontae Kim, Keuntek Lee, Nam Ik Cho
Резюме на русском
## Контекст
Обработка изображений широко применяется в различных сферах, включая визуализацию, распознавание объектов, медицину и искусственный интеллект. Одна из ключевых задач в этой области — реализация эффективных и быстрых методов улучшения качества изображений. Существующие подходы часто включают сложные модели, которые требуют больших ресурсов вычислений и памяти. Недостаток этих подходов заключается в ограничении их использования в реальном времени или на устройствах со специальным оборудованием. Требуется разработка более легких и быстрых методов, которые сочетают эффективность и качество.
## Метод
Мы предлагаем метод, основанный на декомпозиции 3D LUT (3-мерных Lookup Tables), чтобы создавать изображение-адаптивные LUTs. Метод разделяет 3D LUT на несколько низкодоменных LUTs и использует Singular Value Decomposition (SVD) для улучшения эффективности. Эта декомпозиция позволяет уменьшить количество параметров и ускорить работу модели, не допуская потерь в качестве обработки. Для работы с пространственными элементами мы также улучшили модули для специальной оптимизации кэша, чтобы повысить производительность на больших разрешениях изображений. Этот подход гарантирует сбалансированность между производительностью и качеством.
## Результаты
Мы провели эксперименты на различных датасетах, включая картинки с различными уровнями разрешения и многоцелевые изображения. Наши результаты показали, что подход эффективно уменьшает количество параметров (до 30-50%) и увеличивает скорость обработки (до 40% быстрее) по сравнению с другими методами 3D LUT. Мы также установили, что наш подход сохраняет качество изображения, не теряя своей способности работать в реальном времени. Эксперименты подтвердили, что наш эффективный подход может быть использован в различных приложениях, включая мобильные устройства и реальном времени.
## Значимость
Предлагаемый подход имеет большое значение в различных областях, таких как мобильные приложения, видео- и изображениеобработка, виртуальная и аugmented реальность. Он предлагает преимущества в форме уменьшения потребления ресурсов, увеличения быстродействия, и сохранения качества изображения. Модель может значительно упростить разработку систем, требующих быстрого улучшения изображений в реальном времени. Это делает ее привлекательной для разработчиков, которые ищут более эффективные способы обработки изображений.
## Выводы
Мы представили метод улучшения изображений, основанный на декомпозиции 3D LUT, который эффективно решает проблему недостатка пространственной информации в существующих LUT-методах
Abstract
The image enhancement methods based on 3D lookup tables (3D LUTs) efficiently
reduce both model size and runtime by interpolating pre-calculated values at
the vertices. However, the 3D LUT methods have a limitation due to their lack
of spatial information, as they convert color values on a point-by-point basis.
Although spatial-aware 3D LUT methods address this limitation, they introduce
additional modules that require a substantial number of parameters, leading to
increased runtime as image resolution increases. To address this issue, we
propose a method for generating image-adaptive LUTs by focusing on the
redundant parts of the tables. Our efficient framework decomposes a 3D LUT into
a linear sum of low-dimensional LUTs and employs singular value decomposition
(SVD). Furthermore, we enhance the modules for spatial feature fusion to be
more cache-efficient. Extensive experimental results demonstrate that our model
effectively decreases both the number of parameters and runtime while
maintaining spatial awareness and performance.
Ссылки и действия
Дополнительные ресурсы: