Quantum Temporal Fusion Transformer

2508.04048v1 cs.LG, quant-ph 2025-08-09
Авторы:

Krishnakanta Barik, Goutam Paul

Резюме на русском

## Контекст Одной из самых вызовов в современном мире является точное прогнозирование временных рядов, которое находит применение в различных областях, включая финансы, энергетику, здравоохранение и производство. Тем не менее, существующие методы часто сталкиваются с ограничениями в точности прогнозов, особенно при работе с большими многомерными данными. Развитие глубоких нейронных сетей и внимательных методов дало подъем новым архитектурам, таким как Temporal Fusion Transformer (TFT), который достиг неоцениваемого успеха в много horisonтном прогнозировании. Однако, несмотря на эти достижения, существуют технологические и эффективности ограничения, которые могут быть преодолены с помощью интеграции квантовых вычислений. Это вдохновило нас на разработку Quantum Temporal Fusion Transformer (QTFT), который призван расширить возможности TFT, используя принципы квантовых вычислений. ## Метод Основой QTFT лежит структура TFT, но с внедрением квантовых алгоритмов, что позволяет улучшить производительность прогнозирования. Мы использовали вариационный квантовый алгоритм, который позволяет использовать текущие носители квантовых вычислений (NISQ) без жестких требований к глубине схемы или числу квантовых бит. Архитектура QTFT включает в себя классические и квантовые компоненты, где квантовый блок отвечает за эффективное построение признаков, тогда как классический блок отвечает за скрытие информации и прогнозирование. Наша методология включала тщательную оптимизацию параметров и адаптацию квантовых моделей для работы с реальными временными рядами. ## Результаты Мы проводили эксперименты QTFT на нескольких открытых базах данных для временных рядов, включая данные из финансовых и производственных секторов. Наши результаты показали, что QTFT не только показал высокую точность в прогнозировании, но и улучшил скорость обучения и эффективность вычислений в сравнении с TFT. В определенных случаях QTFT превысил TFT в обеих метриках — обучения и теста. Однако, в других случаях, QTFT демонстрировал похожую производительность с TFT, что отражает надёжность и конкурентоспособность нашей модели. ## Значимость Проект QTFT открывает новые горизонты в области временных рядов прогнозирования, используя преимущества квантовых вычислений. Он может быть применен в различных отраслях, таких как финансы, энергия, и здравоохранение, где точность и эффективность прогнозирования критичны. Одним из ключевых преимуществ является его возможность работать на текущих NISQ-устройствах, что сокращает требования к ресурсам. Потенциальное влияние QTFT заключается в том, что он

Abstract

The Temporal Fusion Transformer (TFT), proposed by Lim et al. [\textit{International Journal of Forecasting}, 2021], is a state-of-the-art attention-based deep neural network architecture specifically designed for multi-horizon time series forecasting. It has demonstrated significant performance improvements over existing benchmarks. In this work, we propose a Quantum Temporal Fusion Transformer (QTFT), a quantum-enhanced hybrid quantum-classical architecture that extends the capabilities of the classical TFT framework. Our results demonstrate that QTFT is successfully trained on the forecasting datasets and is capable of accurately predicting future values. In particular, our experimental results display that in certain test cases, the model outperforms its classical counterpart in terms of both training and test loss, while in the remaining cases, it achieves comparable performance. A key advantage of our approach lies in its foundation on a variational quantum algorithm, enabling implementation on current noisy intermediate-scale quantum (NISQ) devices without strict requirements on the number of qubits or circuit depth.

Ссылки и действия