The Price of Sparsity: Sufficient Conditions for Sparse Recovery using Sparse and Sparsified Measurements
2509.01809v1
stat.ML, cs.IT, cs.LG, math.IT, math.ST, stat.TH
2025-09-05
Авторы:
Youssef Chaabouni, David Gamarnik
Резюме на русском
#### Контекст
В области оценивания свойств сигналов и систем важной задачей является восстановление спарселенных сигналов с использованием проекций, записанных в спарселенных матрицах. Это применимо, например, в сигнальных обработке, компрессии данных и анализе сигналов в физике и биологии. Существующие результаты касаются ситуаций, когда матрицы проекций являются плотными, но менее изучены ситуации, когда матрицы являются спарселенными. Такой недостаток мотивирует изучение характеристик восстановления спарселенных сигналов при использовании спарселенных проекций.
#### Метод
Мы рассматриваем задачу восстановления спарселенного сигнала с использованием спарселенных и спарселенных проекций. Методология основывается на анализе характеристик сигнала и подхода к проекции. Технические решения включают анализ матриц проекции и анализ того, как выбор размерности и спарселенности влияет на восстановление сигнала. Архитектура экспериментального подхода основывается на моделировании сигналов с разными спарселенностями и спарселенными проекций, а также на анализе полученных результатов.
#### Результаты
Изучение показало, что для успешного восстановления спарселенных сигналов при использовании спарселенных проекций необходима определенная доля выборок. Находится информационно-теоретическая граница для успешного восстановления, которая зависит от размера сигнала, числа ненулевых компонент и спарселенности подмножеств проекций. Эксперименты показывают, что при $ds/p \rightarrow +\infty$, требуемая выборка растет в соотношении $\log{s}/\log\left(ds/p\right)$, что демонстрирует торговую марку между простотой матрицы проекции и необходимостью выборки. Также исследуется влияние спарселенности на восстановление сигнала в случае спарселенных матриц.
#### Значимость
Результаты имеют применение в системах сжатия данных, сигнальной обработке и анализе сигналов в физике и биологии. Они демонстрируют, как можно эффективно использовать спарселенные проекции для восстановления спарселенных сигналов, но при этом показывают торговую марку между спарселенностью и выборкой. Это делает полученные результаты важными для технических применений, где необходимо оптимально сбалансировать сложность вычислений и качество восстановления.
#### Выводы
Мы установили оптимальные условия для восстановления спарселенных сигналов при использовании спарселенных проекций. Наша работа демонстрирует торговую марку между спарселенностью матрицы проекции и необходимостью выборки. Будущие исследования будут сосредоточ
Abstract
We consider the problem of recovering the support of a sparse signal using
noisy projections. While extensive work has been done on the dense measurement
matrix setting, the sparse setting remains less explored. In this work, we
establish sufficient conditions on the sample size for successful sparse
recovery using sparse measurement matrices. Bringing together our result with
previously known necessary conditions, we discover that, in the regime where
$ds/p \rightarrow +\infty$, sparse recovery in the sparse setting exhibits a
phase transition at an information-theoretic threshold of
$n_{\text{INF}}^{\text{SP}} =
\Theta\left(s\log\left(p/s\right)/\log\left(ds/p\right)\right)$, where $p$
denotes the signal dimension, $s$ the number of non-zero components of the
signal, and $d$ the expected number of non-zero components per row of
measurement. This expression makes the price of sparsity explicit: restricting
each measurement to $d$ non-zeros inflates the required sample size by a factor
of $\log{s}/\log\left(ds/p\right)$, revealing a precise trade-off between
sampling complexity and measurement sparsity. Additionally, we examine the
effect of sparsifying an originally dense measurement matrix on sparse signal
recovery. We prove in the regime of $s = \alpha p$ and $d = \psi p$ with
$\alpha, \psi \in \left(0,1\right)$ and $\psi$ small that a sample of size
$n^{\text{Sp-ified}}_{\text{INF}} = \Theta\left(p / \psi^2\right)$ is
sufficient for recovery, subject to a certain uniform integrability conjecture,
the proof of which is work in progress.