Adaptive Knowledge Distillation using a Device-Aware Teacher for Low-Complexity Acoustic Scene Classification

#### Контекст Акцент в данном исследовании ложится на решение двух значимых проблем в области классификации акустических сцен: ограниченную сложность моделей и их устойчивость к различным устройствам. На практике требуется создание моделей, которые будут эффективными с точки зрения вычислительных затрат и достаточно гибкими для работы в разных условиях. Особенно актуальным становится задание, когда модель должна обеспечить высокую точность работы как на знакомых, так и на незнакомых устройствах. Задача становится еще более сложной, если добавить ограничение на сложность модели. Работа адресует эти проблемы, предлагая новую архитектуру, основанную на методе знаний о воспитании, для эффективного классификационного решения. #### Метод Предлагаемая система основывается на методе знаний о воспитание, при котором эффективная модель CP-MobileNet учится от двух специализированных учителей. Основной учитель — PaSST — обучается стандартным кросс-энтропийным потерям. Дополнительный учитель, называемый генерализационным экспертом, обучается с помощью потери Device-Aware Feature Alignment (DAFA). Данная потеря является острой инновацией, которая адаптирована из предыдущих работ и гарантирует улучшение устойчивости модели к различным устройствам. В случае, когда доступны метки устройств на этапе тестирования, модель CP-MobileNet проводит окончательную стадию делифайна. Эта стратегия позволяет эффективно воспользоваться доступными метаданными, чтобы дополнительно улучшить качество классификации. #### Результаты В ходе экспериментов была проведена серия испытаний на развитии наборе данных. Модель сталкивалась с двумя основными целями: достижение высокого уровня точности и устойчивости к разным устройствам. На данных, где доступны метки устройств, модель достигла точности 57.93%, что значительно превосходит официальную базовую модель. Особенно выдающиеся результаты были получены при работе с незнакомыми устройствами, где существенно улучшилась общеупотребительная стратегия классификации. Эти результаты подтверждают эффективность использования знаний о воспитании в задаче классификации акустических сцен с высокой сложностью. #### Значимость Предлагаемый подход имеет широкую область применения, в том числе в системах автоматической классификации акустических сцен на различных устройствах. Одним из основных преимуществ является увеличение устойчивости к разным устройствам без потери точности. Это делает модель применимую в ситуациях, где необходима высокая надежность в различных условиях. Кроме того, подход может быть испо