Lightweight and Fast Real-time Image Enhancement via Decomposition of the Spatial-aware Lookup Tables

2508.16121v1 eess.IV, cs.CV 2025-08-26
Авторы:

Wontae Kim, Keuntek Lee, Nam Ik Cho

Резюме на русском

## Контекст Обработка изображений широко применяется в различных сферах, включая визуализацию, распознавание объектов, медицину и искусственный интеллект. Одна из ключевых задач в этой области — реализация эффективных и быстрых методов улучшения качества изображений. Существующие подходы часто включают сложные модели, которые требуют больших ресурсов вычислений и памяти. Недостаток этих подходов заключается в ограничении их использования в реальном времени или на устройствах со специальным оборудованием. Требуется разработка более легких и быстрых методов, которые сочетают эффективность и качество. ## Метод Мы предлагаем метод, основанный на декомпозиции 3D LUT (3-мерных Lookup Tables), чтобы создавать изображение-адаптивные LUTs. Метод разделяет 3D LUT на несколько низкодоменных LUTs и использует Singular Value Decomposition (SVD) для улучшения эффективности. Эта декомпозиция позволяет уменьшить количество параметров и ускорить работу модели, не допуская потерь в качестве обработки. Для работы с пространственными элементами мы также улучшили модули для специальной оптимизации кэша, чтобы повысить производительность на больших разрешениях изображений. Этот подход гарантирует сбалансированность между производительностью и качеством. ## Результаты Мы провели эксперименты на различных датасетах, включая картинки с различными уровнями разрешения и многоцелевые изображения. Наши результаты показали, что подход эффективно уменьшает количество параметров (до 30-50%) и увеличивает скорость обработки (до 40% быстрее) по сравнению с другими методами 3D LUT. Мы также установили, что наш подход сохраняет качество изображения, не теряя своей способности работать в реальном времени. Эксперименты подтвердили, что наш эффективный подход может быть использован в различных приложениях, включая мобильные устройства и реальном времени. ## Значимость Предлагаемый подход имеет большое значение в различных областях, таких как мобильные приложения, видео- и изображениеобработка, виртуальная и аugmented реальность. Он предлагает преимущества в форме уменьшения потребления ресурсов, увеличения быстродействия, и сохранения качества изображения. Модель может значительно упростить разработку систем, требующих быстрого улучшения изображений в реальном времени. Это делает ее привлекательной для разработчиков, которые ищут более эффективные способы обработки изображений. ## Выводы Мы представили метод улучшения изображений, основанный на декомпозиции 3D LUT, который эффективно решает проблему недостатка пространственной информации в существующих LUT-методах

Abstract

The image enhancement methods based on 3D lookup tables (3D LUTs) efficiently reduce both model size and runtime by interpolating pre-calculated values at the vertices. However, the 3D LUT methods have a limitation due to their lack of spatial information, as they convert color values on a point-by-point basis. Although spatial-aware 3D LUT methods address this limitation, they introduce additional modules that require a substantial number of parameters, leading to increased runtime as image resolution increases. To address this issue, we propose a method for generating image-adaptive LUTs by focusing on the redundant parts of the tables. Our efficient framework decomposes a 3D LUT into a linear sum of low-dimensional LUTs and employs singular value decomposition (SVD). Furthermore, we enhance the modules for spatial feature fusion to be more cache-efficient. Extensive experimental results demonstrate that our model effectively decreases both the number of parameters and runtime while maintaining spatial awareness and performance.

Ссылки и действия