Top-$k$ Feature Importance Ranking

#### Контекст Определение важных признаков — одна из фундаментальных задач в интерпретируемом машинном обучении. Эта задача имеет приложения во многих областях, включая научное открытие, клиническую диагностику, искусственный интеллект и другие. Однако, несмотря на её ключевую роль, существуют значительные проблемы в систематизации и оценке признаков, особенно в контексте их важности. Обычно используются меры важности признаков, но ряд недостатков этих подходов, таких как неточность, неявность и отсутствие явной оптимизации для определения топ-$k$ признаков, затрудняют их применение в реальных задачах. #### Метод Мы предлагаем **RAMPART (Ranked Attributions with MiniPatches And Recursive Trimming)** — новую методологию для точного топ-$k$ определения важности признаков. Метод заключается в использовании ранжирования важности признаков как целевой функции, а не как пост-процессингового шага. Основные технические инструменты включают: - **MiniPatches**: локальные области функционального пространства, оптимизирующие решение задачи; - **Recursive Trimming**: последовательная эксплуатация фильтрации ненужных признаков; - **Sequential Halving**: эффективная стратегия уменьшения вычислительных затрат при оценке важности признаков. RAMPART сочетает эти элементы в целостную архитектуру, при этом оптимизируя точность ранжирования по важности признаков. #### Результаты Мы провели ряд экспериментов с использованием синтетических и реальных данных. Наши результаты показали, что RAMPART превосходит существующие методы ранжирования признаков, такие как SHAP, LIME и др., по метрикам точности ранжирования. В частности, в ситуациях с высокой размерностью данных, RAMPART показал существенный выигрыш в требованиях к вычислительным ресурсам и точности результатов. Мы также провели серию исследований в области геномики, где RAMPART демонстрировал способность выделять важные гены с высокой точностью. #### Значимость Предложенный подход имеет широкие применения в научном открытии, клинической диагностике и других областях, где важность признаков ключева для принятия решений. Разработанная архитектура достигает более высокой точности и эффективности по сравнению с ранее используемыми методами. Благодаря использованию адаптивных техник, RAMPART эффективно использует ресурсы и обеспечивает более точные результаты. #### Выводы Результаты наших исследований показали, что RAMPART является прорывом в области ранжирования важности признаков. Мы планируем продолжить работу над улучшением этой методологии, оптимизируя её для более сложных задач и применяя её в различных практических задачах. Этот подход может стать