Supervised Stochastic Gradient Algorithms for Multi-Trial Source Separation
2508.20618v1
cs.LG, stat.ML
2025-08-29
Авторы:
Ronak Mehta, Mateus Piovezan Otto, Noah Stanis, Azadeh Yazdan-Shahmorad, Zaid Harchaoui
Резюме на русском
## Контекст
Современные приложения в области акустики, биомедицины и цифровых систем часто сталкиваются с задачей выделения источников сигналов из смешанных данных. Эта задача, известная как многоканальная источниковая разделка (source separation), требует эффективных методов, чтобы извлечь целевые сигналы с минимальными ошибками. В существующих методах используется многоканальная супервайзированная инверсия (supervised inversion), которая основывается на предварительной информации о структуре сигналов. Однако традиционные подходы не полностью используют доступные супервайзированные данные, что приводит к ограниченным результатам в задачах разделки сигналов. Необходимо разработать методы, которые будут эффективно использовать доступные супервайзированные данные для улучшения точности и интерпретируемости решений.
## Метод
Мы предлагаем супервайзированный стохастический градиентный метод для многоканальной источниковой разделки, который включает в себя многоканальное наблюдение (multi-trial supervision). Основная идея заключается в объединении локального сглаживания, реализуемого через проксимальный градиент-тип, с обучением модели прогноза с помощью обратного распространения ошибки (backpropagation). Алгоритм работает в пространстве инверсий матриц, что позволяет ему эффективно работать с нелинейными задачами. Метод также включает в себя специальные математические техники для обеспечения стабильности и точности решений. Этот подход может быть подан в виде библиотеки для решения различных задач источниковой разделки, которые имеют доступ к супервайзированным данным.
## Результаты
Мы провели эксперименты на синтетических и реальных данных, чтобы оценить эффективность предлагаемого метода. Для синтетических данных мы сравнили используемый подход с традиционными методами и получили значительное улучшение в точности разделки сигналов. На реальных данных, включающих задачи разделки звуков и сигналов из биологических источников, метод показал улучшение интерпретируемости изолированных компонент. Эксперименты также показали, что наличие дополнительных супервайзированных данных существенно повышает успешность решения нелинейных задач источниковой разделки.
## Значимость
Предлагаемый подход имеет широкие области применения, в том числе в медицине для выделения сигналов из электроенцефалограмм (EEG) или электрокардиограмм (ECG), в цифровых системах для распознавания речи, а также в акустических приложениях для отделения звуков в сложных средах. Он предоставляет значительные преимущества перед традиционными методами, включая улучшение точности и интерпретируемо
Abstract
We develop a stochastic algorithm for independent component analysis that
incorporates multi-trial supervision, which is available in many scientific
contexts. The method blends a proximal gradient-type algorithm in the space of
invertible matrices with joint learning of a prediction model through
backpropagation. We illustrate the proposed algorithm on synthetic and real
data experiments. In particular, owing to the additional supervision, we
observe an increased success rate of the non-convex optimization and the
improved interpretability of the independent components.
Ссылки и действия
Дополнительные ресурсы: