The alpha-beta divergence for real and complex data
2508.03272v1
cs.LG, cs.IT, math.IT, stat.ML
2025-08-09
Авторы:
Sergio Cruces
Резюме на русском
## Контекст
Область исследования связана с разработкой методов для обработки и анализа сигналов, где ключевой аспект является использование различных форм меры дивергенции. Дивергенции широко применяются в сигнальных процессах, таких как сжатие данных, статистическая обработка и глубокое обучение. Однако существуют проблемы, связанные с ограниченностью традиционных дивергенций, когда применяются к неотрицательным данным. Мотивация заключается в расширении функций дивергенции, чтобы они могли более точно адаптироваться к комплексным данным и включать различные модели распределения.
## Метод
Методология основывается на расширении алфа-бета-дивергенций для комплексных данных. Автор предлагает формулы, которые позволяют работать с комплексными векторами, обеспечивая постоянное соответствие классическим расстояниям, таким как евклидово расстояние и Махаланобисово расстояние. Технические решения включают уточнения в зависимости от гиперпараметров дивергенции. Архитектура рассматривается в контексте сигнальных процессов, где данные неотрицательны или комплекснозначны. Метод широко применяется в ситуациях, где необходимо максимизировать точность информационных критериев.
## Результаты
Эксперименты показывают, что алфа-бета-дивергенции могут служить для точного определения расстояний между комплексными векторами. Использовались различные наборы данных, включая те, которые имеют комплексное значение. Результаты показали, что данный подход дает более точные результаты по сравнению с традиционными методами, особенно при определении структуры данных. Это продемонстрировано на примере приближения комплексных случайных векторов с помощью метода оптимизации альфа-бета-дивергенции.
## Значимость
Предложенный подход может применяться во многих областях, таких как синтез сигналов, сжатие изображений, статистическая обработка сложных данных. Он предлагает преимущества, включая гибкость в учете специфики данных, более точное приближение к реальным моделям распределения. Потенциальное влияние заключается в расширении возможностей для решения задач в области глубокого обучения, синтеза и анализа сигналов, где данные не только реальные, но и комплексные по характеру.
## Выводы
Выводы посвящены основным достижениям, включая расширение алфа-бета-дивергенций для комплексных данных и выявление ролей гиперпараметров в оптимизации. Также отмечается, что данный подход может быть использован в широком круге применений, включая не только сигнальную обработку, но и другие сферы, где данные имеют
Abstract
Divergences are fundamental to the information criteria that underpin most
signal processing algorithms. The alpha-beta family of divergences, designed
for non-negative data, offers a versatile framework that parameterizes and
continuously interpolates several separable divergences found in existing
literature. This work extends the definition of alpha-beta divergences to
accommodate complex data, specifically when the arguments of the divergence are
complex vectors. This novel formulation is designed in such a way that, by
setting the divergence hyperparameters to unity, it particularizes to the
well-known Euclidean and Mahalanobis squared distances. Other choices of
hyperparameters yield practical separable and non-separable extensions of
several classical divergences. In the context of the problem of approximating a
complex random vector, the centroid obtained by optimizing the alpha-beta mean
distortion has a closed-form expression, which interpretation sheds light on
the distinct roles of the divergence hyperparameters. These contributions may
have wide potential applicability, as there are many signal processing domains
in which the underlying data are inherently complex.