Sound Signal Synthesis with Auxiliary Classifier GAN, COVID-19 cough as an example

## Контекст Современные технологии искусственного интеллекта (AI) широко применяются в различных областях, включая здравоохранение. Наибольший интерес в этой области вызывает развитие моделей, которые могут помогать врачам в диагностике и лечении болезней. Одна из самых острых проблем в этой области является нехватка данных для обучения моделей. Например, во время распространения COVID-19, многие исследователи занимались разработкой моделей, которые могут диагностировать заболевание на основе различных данных, в том числе звуковых сигналов кушания. Однако получение качественных данных для обучения моделей оказалось сложным из-за нестабильности и множественных факторов, влияющих на звуковые сигналы. Для решения этой проблемы было предложено генерировать синтетические данные для обучения моделей. Этот подход имеет потенциал для улучшения точности диагностики и повышения доступности данных для обучения моделей. ## Метод В работе используется методология синтеза звуковых сигналов с помощью генеративной антропологической сети с вспомогательным классификатором (Auxiliary Classifier GAN, ACGAN). Данная модель генерирует синтетические Mel-спектрограммы звуковых сигналов кушания, как для здоровых людей, так и для людей, страдающих COVID-19. Модель обучается на данных из Coughvid-датасета, после чего производится подбор модели для обучения классификатора. Используются модификации методов для обработки нестабильности в генеративных сетях и исправления ошибок. Также в работе применяются техники для оценки качества синтетических данных и их интеграции в обучающую выборку классификатора. ## Результаты В ходе экспериментов проводилась оценка качества синтетических звуковых сигналов генератора ACGAN. Была получена модель, которая успешно генерирует Mel-спектрограммы для здоровых и больных COVID-19. Эти синтетические данные использовались для расширения выборки обучения CNN-классификатора. Точность классификации на тестовой выборке увеличилась с 72% до 75% при использовании синтетических данных. Эксперименты показали, что использование синтетических данных может улучшить точность диагностики, но при этом требуется внимательное мониторинге некоторых недостатков в процессе обучения. ## Значимость Результаты работы могут быть применены в областях медицины и AI для повышения точности диагностики COVID-19. Использование синтетических данных позволяет увеличить объем данных для обучения моделей, что важно в ситуациях, когда наличие реальных данных ограничено. Помимо этого, этот подход может быть применен для других задач, где требуется генерация звуковых сигналов, таких ка