Vectorized Attention with Learnable Encoding for Quantum Transformer

## Контекст Одним из наиболее актуальных направлений в современной информатике является интеграция квантовых вычислений с традиционными моделями машинного обучения. Квантовые трансформаторы (QT) предлагают возможность заменить классические самоп paуживающиеся аттенционные механизмы на квантовые симуляции, подходящие для вычислений в громадных пространствах Хильберта. Однако, существующие QT в основном полагаются на важные параметрические квантовые схемы (PQCs), которые очень чувствительны к шумам в квантовых устройствах (QPU). Этот факт существенно снижает эффективность и надежность таких моделей. Необходимая методика, которая могла бы уменьшить эту чувствительность и повысить эффективность квантовых трансформаторов, до сих пор остается недостаточно развита. ## Метод Предлагаемая модель Vectorized Quantum Transformer (VQT) представляет собой новую архитектуру квантовых трансформаторов, которая уменьшает эффект квантового шума и улучшает общую эффективность. Методом решения становится симуляция векторизованных квантовых блоков (Vectorized Quantum Block Encoding), которая позволяет вложить классические данные в пространство Хильберта с использованием квантовых операций. Ключевым элементом является векторизованный нелинейный квантовый кодировщик (Vectorized Nonlinear Quantum Encoder), который обеспечивает эффективное обучение и высокую точность. Эта модель также включает в себя методы градиентно-бесплатных схем симуляции (Gradient-Free Quantum Circuit Simulation), что позволяет снизить классический объем вычислений и повысить надежность. ## Результаты В ходе экспериментальных исследований была проведена сравнительная оценка точности VQT на двух квантовых устройствах: IBM и IonQ. Модель показала высокую точность в задачах естественного языка (natural language processing) при работе на стадии виртуальных квантовых процессоров IBM и высокоточном Kingston QPU. Для сравнения QCS (Quantum Circuit Simulation), результаты VQT были сравнены с существующими квантовыми моделями, и демонстрируют существенные улучшения в эффективности вычислений и снижении шума. ## Значимость VQT представляет собой новую архитектуру, предназначенную для использования в квантовых системах для машинного обучения. Она предоставляет высокую точность в задачах NLP и особенную подходит для квантовых устройств с низким шумом. VQT может использоваться в приложениях в сферах робототехники, химии, финансов, где требуется высокая производительность и точность. Эта модель также открывает пути для будущих исследований в области квантовых методов машинного обучения и их применения в реальных ситуациях. ## Выводы В результате, VQT представляет собой