Multivariate Fields of Experts
2508.06490v1
eess.IV, cs.CV, cs.LG, eess.SP
2025-08-12
Авторы:
Stanislas Ducotterd, Michael Unser
Резюме на русском
#### Контекст
В области обработки изображений и реконструкции изображений существует необходимость в мощных и эффективных моделях, которые могут решать вызовы, связанные с поиском признаков, восстановлением и декодированием. Одним из ключевых задач для этих приложений является разработка эффективных моделей признаков, которые могут оптимально описывать структуру изображений. Традиционно, такие модели строятся на основе нейронных сетей, но они часто требуют больших объемов данных и ресурсов для обучения. В этой работе предлагается новый подход, Multivariate Fields of Experts, который предназначен для улучшения точности и надежности решений в обработке изображений.
#### Метод
Модель Multivariate Fields of Experts основывается на создании нового класса потенциальных функций, которые используют **Moreau envelopes** $\ell_\infty$-нормы. Это позволяет интегрировать многомерные зависимости в модель, что делает ее более сложной, но также более точной для представления сложных структур изображений. Метод включает в себя несколько стадий:
1. **Построение потенциальных функций**: Используется Moreau envelope, чтобы добиться более разреженных и точных представлений.
2. **Многомерное моделирование**: Новая архитектура включает в себя несколько моделей, которые работают совместно для обеспечения более глубокого и точного представления изображений.
3. **Оптимизация**: Используется адаптивная оптимизация для обучения модели, чтобы минимизировать ошибки реконструкции.
Эта архитектура позволяет модели Multivariate Fields of Experts оптимально использовать все доступные сведения о изображении, улучшая эффективность и точность решений.
#### Результаты
Результаты экспериментов показывают, что Multivariate Fields of Experts эффективно работает на различных задачах:
- **Image Denoising**: Модель достигла лучшей точности по сравнению с базовыми подходами, удаляя шум более точно и сохраняя достоверность деталей.
- **Image Deblurring**: Модель восстановила разрешенное изображение, избавившись от размытия, при этом сохранив размеры и формы объектов.
- **Compressed-Sensing MRI и CT**: В области магнитной резонансной зондки и вычислительной томографии метод показал высокую точность в восстановлении изображений, сократив время расчетов и требуя меньше ресурсов.
По сравнению с другими методами, в том числе действительно нейронными моделями, Multivariate Fields of Experts показала скорость работы и эффективность, особенно при малом количестве данных для обучения.
#### Значимость
Модель Multivariate Fields of Experts обладает широкими областями применения:
- **Медицинская импровизация**: Улучшение точности восстановления изображений в медицинских сканерах.
- **Реконструкция изображений**: Улучшение качества изображений в ситуациях, где данные ограничен
Abstract
We introduce the multivariate fields of experts, a new framework for the
learning of image priors. Our model generalizes existing fields of experts
methods by incorporating multivariate potential functions constructed via
Moreau envelopes of the $\ell_\infty$-norm. We demonstrate the effectiveness of
our proposal across a range of inverse problems that include image denoising,
deblurring, compressed-sensing magnetic-resonance imaging, and computed
tomography. The proposed approach outperforms comparable univariate models and
achieves performance close to that of deep-learning-based regularizers while
being significantly faster, requiring fewer parameters, and being trained on
substantially fewer data. In addition, our model retains a relatively high
level of interpretability due to its structured design.