Quantum Temporal Fusion Transformer
2508.04048v1
cs.LG, quant-ph
2025-08-09
Авторы:
Krishnakanta Barik, Goutam Paul
Резюме на русском
## Контекст
Одной из самых вызовов в современном мире является точное прогнозирование временных рядов, которое находит применение в различных областях, включая финансы, энергетику, здравоохранение и производство. Тем не менее, существующие методы часто сталкиваются с ограничениями в точности прогнозов, особенно при работе с большими многомерными данными. Развитие глубоких нейронных сетей и внимательных методов дало подъем новым архитектурам, таким как Temporal Fusion Transformer (TFT), который достиг неоцениваемого успеха в много horisonтном прогнозировании. Однако, несмотря на эти достижения, существуют технологические и эффективности ограничения, которые могут быть преодолены с помощью интеграции квантовых вычислений. Это вдохновило нас на разработку Quantum Temporal Fusion Transformer (QTFT), который призван расширить возможности TFT, используя принципы квантовых вычислений.
## Метод
Основой QTFT лежит структура TFT, но с внедрением квантовых алгоритмов, что позволяет улучшить производительность прогнозирования. Мы использовали вариационный квантовый алгоритм, который позволяет использовать текущие носители квантовых вычислений (NISQ) без жестких требований к глубине схемы или числу квантовых бит. Архитектура QTFT включает в себя классические и квантовые компоненты, где квантовый блок отвечает за эффективное построение признаков, тогда как классический блок отвечает за скрытие информации и прогнозирование. Наша методология включала тщательную оптимизацию параметров и адаптацию квантовых моделей для работы с реальными временными рядами.
## Результаты
Мы проводили эксперименты QTFT на нескольких открытых базах данных для временных рядов, включая данные из финансовых и производственных секторов. Наши результаты показали, что QTFT не только показал высокую точность в прогнозировании, но и улучшил скорость обучения и эффективность вычислений в сравнении с TFT. В определенных случаях QTFT превысил TFT в обеих метриках — обучения и теста. Однако, в других случаях, QTFT демонстрировал похожую производительность с TFT, что отражает надёжность и конкурентоспособность нашей модели.
## Значимость
Проект QTFT открывает новые горизонты в области временных рядов прогнозирования, используя преимущества квантовых вычислений. Он может быть применен в различных отраслях, таких как финансы, энергия, и здравоохранение, где точность и эффективность прогнозирования критичны. Одним из ключевых преимуществ является его возможность работать на текущих NISQ-устройствах, что сокращает требования к ресурсам. Потенциальное влияние QTFT заключается в том, что он
Abstract
The Temporal Fusion Transformer (TFT), proposed by Lim et al.
[\textit{International Journal of Forecasting}, 2021], is a state-of-the-art
attention-based deep neural network architecture specifically designed for
multi-horizon time series forecasting. It has demonstrated significant
performance improvements over existing benchmarks. In this work, we propose a
Quantum Temporal Fusion Transformer (QTFT), a quantum-enhanced hybrid
quantum-classical architecture that extends the capabilities of the classical
TFT framework. Our results demonstrate that QTFT is successfully trained on the
forecasting datasets and is capable of accurately predicting future values. In
particular, our experimental results display that in certain test cases, the
model outperforms its classical counterpart in terms of both training and test
loss, while in the remaining cases, it achieves comparable performance. A key
advantage of our approach lies in its foundation on a variational quantum
algorithm, enabling implementation on current noisy intermediate-scale quantum
(NISQ) devices without strict requirements on the number of qubits or circuit
depth.
Ссылки и действия
Дополнительные ресурсы: