QTMRL: An Agent for Quantitative Trading Decision-Making Based on Multi-Indicator Guided Reinforcement Learning

#### Контекст Глобальные финансовые рынки характеризуются высокой волатильностью и неопределенностью, что создает значительные ограничения для традиционных моделей квантитативной торговли. Эти модели, основанные на статистических моделях или эмпирических правилах, часто не могут адаптироваться к динамическим изменениям рынка и безупречным "черным ястребским" событиям. Это обусловлено жесткими предположениями и ограниченным развитием общего спектра моделей. Для решения этих проблем предлагается QTMRL (Quantitative Trading Multi-Indicator Reinforcement Learning) — интеллектуальный торговый агент, который объединяет многомерные технические индикаторы с рейнфорсмент-лернингом (RL) для адаптивного и устойчивого управления портфелем. Такой подход предназначен для улучшения производительности и устойчивости в условиях нестабильных финансовых условий. #### Метод Для реализации QTMRL разработана специальная методология, основанная на многомерных технических индикаторах и RL. Данный подход включает в себя сбор и обработку исторических данных цен на S&P 500 за период с 2000 до 2022, что предоставляет данные о ценах, открытии, максимумах и минимумах (OHLCV) для 16 представительных активов из 5 различных секторов. Данные дополняются трендовыми, волатильностью и моментом индикаторами, чтобы перехватить целевую динамику рынка. Кроме того, используется легковесный RL-фреймворк, основанный на алгоритме Advantage Actor-Critic (A2C), который включает в себя модули для обработки данных, учета прибыли и агента торговли. Этот компонент позволяет обучить агента QTMRL для принятия упорядоченных торговых решений. #### Результаты На основе QTMRL проводились разнообразные эксперименты, которые демонстрируют его эффективность по сравнению с 9 базовыми моделями, включая ARIMA, LSTM и стратегии скользящих средних. Использовались разные режимы рынка для оценки производительности модели. Эксперименты показали, что QTMRL имеет высокую прибыльность, эффективно управляет рисками и показывает улучшенную устойчивость в условиях негативных рыночных регрессий. Полученные результаты подтверждают высокую точность использования RL для квантитативного торгового управления портфелем, что демонстрирует потенциал QTMRL в трудных финансовых условиях. #### Значимость QTMRL может быть применен в различных сферах финансовых услуг, включая автоматизацию торговли, портфельное управление и управление рисками. Его особенность заключается в улучшении устойчивости и производительности в условиях неопределенности рынка. Этот подход предоставляет преимущества, такие как уменьшение риска, увеличение прибыли и усто