Investigation of D-Wave quantum annealing for training Restricted Boltzmann Machines and mitigating catastrophic forgetting

## Контекст Область исследования сосредоточена на исследовании возможностей использования квантовых аннелинг-машин D-Wave для обучения моделей типа Restricted Boltzmann Machines (RBMs). Также внимание уделяется рассмотрению проблемы **catastrophic forgetting (CF)**, которая возникает при многозадачном инкрементном обучении. Мотивацией данного исследования является необходимость решения проблемы несостоятельности квантового аннелинга в D-Wave для улучшения RBM, в сравнении с классическими методами монте-карловых цепей (MCMC). Однако, некоторые моменты в работах, использующих квантовую аппаратуру, показали небольшие, но существующие различия в производительности. Это вдохновило рассмотрение возможности комбинирования классических методов и квантовых методов в создании более эффективных подходов для задач обучения и CF-минимизации. ## Метод Исследование основывается на использовании D-Wave quantum annealer (QA) для генерации значений сигма-распределения, используемых в качестве входных данных для обучения RBM. Методология включает сравнительное исследование QA и MCMC, а на основе полученных результатов разрабатывается гибридный подход, объединяющий мощности обеих методик. Эксперименты проводились на собственных данных, а для оценки качества полученных решений функции ошибок RBM и качества сэмплирования использовались. Также для обучения RBM применялся подход с постепенным добавлением новых классов (incremental learning), чтобы проверить возможность минимизации CF. ## Результаты Детальные эксперименты показали, что в целом, различия в производительности между QA и MCMC незначительны. Однако QA-сэмплинг демонстрирует незначительное преимущество в сэмплировании в средних и низких процентилях распределения. Обучение RBM с помощью QA не дало значимых преимуществ по сравнению с MCMC. Однако, применяя QA в контексте CF-минимизации, можно использовать метод **generative replay**, генерируя новые данные для категорий, которые могут быть забыты в процессе многозадачного обучения. Это позволило показать, что QA может генерировать разнообразные и качественные сэмплы для CF-минимизации, приблизительно на уровне классических методов. ## Значимость Полученные результаты имеют перспективу в нескольких областях: 1) Улучшение обучения RBMs и других моделей, когда применяются квантовые методы для сэмплирования; 2) Минимизация CF при многозадачном обучении, где QA позволяет генерировать разнообразные сэмплы, значительно увеличивая эффективность метода generative replay; 3) Потенциал для дальнейшего улучшения технологий квантового сэмплинга, что может сделать QA более эффективным в будущих исследованиях. ## Выводы В ходе работы было доказано,