Interpretable Kernels

## Контекст Область исследования, связанная с использованием ядер для нелинейного предсказания, широко распространена в машинном обучении. Ядра, популяризированные в стохастических оптимизациях и использованные в классификации и регрессии, характеризуются тремя основными аспектами. Во-первых, каждая наблюдаемая точка преобразуется в более развернутый пространственный вектор. Во-вторых, регуляризатор штрафа ридж используется для уменьшения весов введенных в пространственный вектор. В-третьих, решение не определяется в направлении самого пространства, но в рамках двойственной задачи, оптимизируемой в пространстве наблюдений. Однако, этот подход имеет определенную проблему: восстановление интерпретируемости оригинальных фич. Эта проблема становится особенно важной при обработке больших массивов данных, где число фич больше числа наблюдений. Если такие проблемы не решены, то методы ядерной регрессии могут не приспособиться к более сложным задачам с высокоэкспериментальными моделями. В этой работе авторы предлагают новую технологию, которая позволяет восстановить интерпретируемость решений ядерной регрессии в случае широких массивов данных. ## Метод В статье предлагается новый подход к восстановлению интерпретируемости решений ядерных методов. Авторы предлагают новую архитектуру, которая позволяет выразить решение ядерной регрессии в терминах линейного комбинационного взвешенного выражения, в котором каждый наблюдаемый элемент матрицы является специальным метрическим штрафом. Эта новая модель делает возможным восстановить интерпретируемый результат в терминах оригинальных добавленных фичей. Авторы также раскрывают теорию, позволяющую использовать данный подход в случае, когда число фич меньше числа наблюдений, через методы аппроксимации матрицы ядерной регрессии и получения решения в виде гауссового процесса. Таким образом, авторы предлагают новый метод, который может быть использован в широком круге задач машинного обучения. ## Результаты В работе проведены эксперименты, которые подтверждают эффективность нового подхода к восстановлению интерпретации решений ядерной регрессии. Авторы использовали различные машинные обучения задачи, в том числе регрессию и классификацию, с разным размером данных. На основе этих экспериментов было показано, что новый метод действительно позволяет восстановить интерпретируемый результат в терминах оригинальных фичей. Было также продемонстрировано, что полученные результаты предлагаемым методом не хуже, чем