Low Power Approximate Multiplier Architecture for Deep Neural Networks

## Контекст Исследование сосредоточено на разработке энергоэффективных аппроксимативных множителей для глубоких нейронных сетей (DNN). Эти сети широко применяются в различных областях, включая обработку изображений, текста и речевых сигналов. Однако аппаратные реализации DNN часто сталкиваются с ограничениями по энергопотреблению, особенно в устройствах с ограниченным питанием, таких как мобильные устройства и IoT-гаджеты. Существующие аппаратные решения либо требуют высокого энергопотребления, либо ухудшают точность распознавания. Мотивация заключается в создании энергоэффективной аппаратной архитектуры, которая обеспечивает высокую точность за счет приемлемых ошибок в вычислениях. ## Метод Предложенная архитектура основывается на использовании 4:2-компрессора, вставленного в 8x8-множитель. 4:2-компрессор, представляющий собой однонаправленный компрессор с одним сочетательным ошибком, позволяет снизить энергопотребление, оставаясь при этом точным в большинстве случаев. Множитель интегрирован в пользовательскую аппаратную реализацию слоя свертки DNN. Также использован алгоритм ранжирования, позволяющий выбирать наиболее подходящие комбинации для уменьшения ошибок. Этот подход применен к нейросетям, обученным на задачах распознавания изображений и убирания шума. ## Результаты Экспериментальные результаты показали, что предложенный множитель эффективен в сочетании с DNN. Например, в задаче распознавания изображений, проводимой на конфигурации кастомного слоя свертки, аппаратная реализация демонстрирует до 30.24% энергоэффективности по сравнению с лучшими альтернативными множителями. В задаче убирания шума с использованием пользовательского аппаратного решения, основанного на подходе с 4:2-компрессором, сеть показала улучшение PSNR (Peak Signal-to-Noise Ratio) и SSIM (Structural Similarity Index Measure) по сравнению с другими аппроксимативными решениями. Также в задаче распознавания рукописных цифр сеть сохранила высокую точность классификации. ## Значимость Предложенная архитектура предлагает значительные преимущества в области энергосберегающих DNN-решений. Она применяется в сценариях, где необходимо сочетание высокой эффективности и приемлемой точности, что делает ее подходящим для устройств с ограниченным питанием. Этот подход имеет потенциал для улучшения работы нейронных сетей в приложениях, таких как здравоохранение, IoT, мобильные приложения и компьютерного зрения. Он также открывает пути для будущих исследований в области энергоэффективных DNN-решений, включая исследования уменьшения о