L1-Regularized Functional Support Vector Machine
2508.05567v2
stat.ML, cs.LG, stat.CO
2025-08-11
Авторы:
Bingfan Liu, Peijun Sang
Резюме на русском
#### Контекст
Функциональный анализ, включая классификацию, широко используется в различных областях, таких как медицина, финансы и инженерия. Однако большинство исследований фокусируются на классификации с использованием одной функциональной переменной, тем самым оставляя за собой вопросы о классификации с многомерными функциональными переменными. Эта задача является сложной, так как приводит к высокомерности моделей и требует эффективных методов регуляризации. Наша мотивация заключается в развитии модели, которая могла бы не только выполнять точную классификацию, но и обеспечивать сведение краткости в функциональных данных.
#### Метод
Предлагаемая модель — $L_1$-регуляризованная функциональная поддеревьявая машина. Основной идеей является внедрение регуляризационного штрафа $L_1$ в классическую функциональную супервёрхую машину. Это позволяет эффективно регулировать модель, снижая число операций, необходимых для вычисления, и выделяя стоящие из себя функциональные ковариаты. Используется метод градиентного спуска для оптимизации функционала, который позволяет решать задачу в больших размерных пространствах. Особенностью модели является её универсальность и возможность применения в различных классах задач.
#### Результаты
Наши эксперименты включали симуляционные и реальные данные, подтверждающие высокую точность классификации и эффективность в селекции функций. Мы использовали синтетические данные, генерирующиеся с различными структурами графа, чтобы проверить модель в условиях разной сложности. Также применялись данные реального мира, такие как медицинские и экономические, чтобы проверить модель на реальных проблемах. Результаты показали, что наша модель outperforms existing approaches в качестве классификации и эффективности в feature selection.
#### Значимость
$L_1$-регуляризованная функциональная поддеревьявая машина может применяться во многих областях, где требуется возможность классификации с многомерными функциональными переменными. Это модель может использоваться в медицине для диагностики заболеваний, в финансах для оценки риска и в других областях, где данные имеют сложную структуру. Из преимуществ модели выделяется высокая точность классификации, эффективность в ресурсах и возможность избавляться от неинформативных функций. Это может привести к значительным повышениям производительности в процессах классификации и прогнозирования.
#### Выводы
Наша модель $L_1$-регуляризованная функциональная поддеревьявая машина доказала высокую эффективность в классификации с многомерными фун
Abstract
In functional data analysis, binary classification with one functional
covariate has been extensively studied. We aim to fill in the gap of
considering multivariate functional covariates in classification. In
particular, we propose an $L_1$-regularized functional support vector machine
for binary classification. An accompanying algorithm is developed to fit the
classifier. By imposing an $L_1$ penalty, the algorithm enables us to identify
relevant functional covariates of the binary response. Numerical results from
simulations and one real-world application demonstrate that the proposed
classifier enjoys good performance in both prediction and feature selection.