Breaking Through Barren Plateaus: Reinforcement Learning Initializations for Deep Variational Quantum Circuits

## Контекст Variational Quantum Algorithms (VQAs) являются мощным инструментом для решения задач, включая оптимизацию, синтез веществ и машинное обучение на ближайших к реальности квантовых устройствах. Однако, эффективность VQAs ограничена проблемой "баренных равнин" (barren plateaus), когда градиенты становятся малыми в сопоставлении с оптимизируемой функцией, что приводит к сложностям в тренировке моделей. Данная проблема становится все более релевантной с ростом размера и глубины квантовых схем. Наша мотивация заключается в разработке метода, который позволит избежать "баренных равнин" и улучшить эффективность тренировки VQAs. ## Метод Мы предлагаем использовать методы машинного обучения, а именно, реинфорсированное обучение (Reinforcement Learning, RL) для инициализации весов в VQAs. Мы тренируем RL-агента для генерирования начальных параметров схемы, которые минимизируют целевую функцию VQAs. Агент использует различные алгоритмы RL, такие как Deterministic Policy Gradient, Soft Actor-Critic и Proximal Policy Optimization, для генерации начальных весов. Эти начальные параметры позволяют алгоритмам оптимизации, таким как градиентный спуск (gradient descent) и Adam, начинать работу с более выгодного положения, избегая "баренных равнин". ## Результаты Мы провести подробные эксперименты для оценки эффективности нашего подхода. Данные для экспериментов были подготовлены с использованием различных задач, включая оптимизацию и синтез веществ. Мы измерили время тренировки, точность решения и затраты ресурсов. Результаты показали, что наш подход существенно улучшает скорость сходимости и точность решения в сравнении с традиционными методами инициализации. Мы также сравнили различные алгоритмы RL и показали, что они дают похожие результаты, что демонстрирует гибкость и устойчивость нашего подхода. ## Значимость Наш метод может быть применен в различных областях, включая оптимизацию, синтез химических соединений и машинное обучение. Он обеспечивает существенное улучшение производительности VQAs, что ведет к более быстрой и точной тренировке моделей. Это делает наш подход ключевым инструментом для устранения проблемы "баренных равнин" в квантовых вычислениях. Будущие исследования будут сфокусированы на расширении этого подхода для более сложных задач и исследовании возможности интеграции с другими методами машинного обучения. ## Выводы Мы предложили новый метод инициализации параметров в VQAs, основанный на реинфорсированном обучении, что позволил устранить проблему "баренных равнин" и улучшить производительность тренировки моделей. Эксперименты показали существенные позитивные результаты в скорост