Bayesian Additive Regression Trees for functional ANOVA model

#### Контекст Байесовские аддитивные деревья регрессии (Bayesian Additive Regression Trees, BART) являются мощным статистическим инструментом, который объединяет преимущества Байесовской информации и регрессионных деревьев. Он получил широкое применение в задачах, требующих локализации сложных нелинейных связей и взаимодействий между описательными переменными. Однако одной из проблем BART является относительная сложность в интерпретации результатов. Для решения этой проблемы была предложена модификация, названная ANOVA BART (англ. Additive Regression Trees based on Functional ANOVA Decomposition), которая основывается на анализе вариации функций с помощью функционального анализа вариаций (англ. Functional ANOVA). Новый подход позволяет декомпозировать вариацию функции на различные подпространства, каждое из которых отвечает за конкретный набор описательных переменных или факторов. ANOVA BART не только улучшает интерпретируемость модели, но и сохраняет и расширяет теоретические гарантии BART. Необходимость данного развития возникла из потребности в моделях, сочетающих высокую точность воспроизведения данных, высокую интерпретируемость и теоретическую надежность. #### Метод Метод ANOVA BART основывается на анализе вариации функции с помощью функционального анализа вариаций. Основополагающим элементом данного метода является декомпозиция функции на пространства, соответствующие различным компонентам вариации. В данном случае, пространство вариации декомпозируется на подпространства, каждое из которых отвечает за конкретный набор описательных переменных. Входные данные разбиваются на группы по группировочным переменным, после чего каждая группа представляется в виде дерева регрессии. Основным этапом метода является обучение деревов регрессии для каждой группы, чтобы отобразить вариацию функции на соответствующие подпространства. Поскольку данный подход не требует полного пересчета всех данных при изменении описательных переменных, он эффективен в высокомерных задачах. Для реализации подхода используются новые алгоритмы, которые позволяют разделить вариацию функции на компоненты с учетом ограничений на их взаимодействия. Это позволяет улучшить теоретические гарантии и повысить точность модели. #### Результаты Для оценки эффективности ANOVA BART проводились многочисленные эксперименты с различными данными. Были сравнивались результаты ANOVA BART и BART на тестовых наборах в задачах классификации и регрессии. Обнаружено, что ANOVA BART показывает более высокую точность и улучшенную оценку неизвестности во всех случаях. Было показано, что модель ANOVA BART предлагает более четкие оценки для каждой компоненты вариации, что д