Interpolating Speaker Identities in Embedding Space for Data Expansion

## Контекст СуCCESS глубокого обучения в системах распознавания речи и сигналов голоса тесно связан с доступом к большим, разнообразным и качественным данным, особенно в сфере распознавания речи по голосу. Однако получение таких данных часто связано с значительными трудностями, включая высокие затраты, сложность приемлемого сбора и ограничения в плане конфиденциальности. Эти факторы ограничивают мощность и широту применения технологий распознавания голоса. Ввиду этих проблем в статье предлагается новая методика, позволяющая увеличить объем данных для обучения, основываясь на интерполяции существующих спикер-идентификаторов. ## Метод Метод, предлагаемый в статье, называется **INSIDE (Interpolating Speaker Identities in Embedding Space)**. Он основывается на интерполяции между существующими спикер-идентификаторами в подготовленном пространстве эмбеддингов. Процесс включает в себя выбор близких спикер-идентификаторов, вычисление их интерполированных эмбеддингов с помощью сферической линейной интерполяции и генерацию новых аудиофайлов с помощью текстово-речевой системы. Эти генерируемые данные добавляются к исходному набору данных для последующего обучения моделей. Такая методика позволяет значительно расширить потенциальные источники для моделей распознавания голоса без необходимости сбора новых данных, а также повысить разнообразие тренировочных данных. ## Результаты Эксперименты показали, что модели, обученные на данных, расширенных методом INSIDE, демонстрируют значительные улучшения в плане точности распознавания. Точность распознавания в системах распознавания речи увеличивается на 3.06% до 5.24% в зависимости от типа тестовой задачи и данных. Также был проведен эксперимент на задаче классификации пола, где INSIDE показал улучшение в 13.44% по отношению к значениям классификации без использования этого метода. Эти результаты демонстрируют значимую эффективность INSIDE в расширении данных и улучшении результатов моделей. ## Значимость Предлагаемый подход имеет широкие возможности применения в системах распознавания речи и сигналов голоса. Он обеспечивает значительную экономию времени и ресурсов, позволяя создавать более разнообразные и качественные наборы данных для моделей. Увеличение количества данных позволяет улучшить точность распознавания и обеспечить более высокую разнообразность моделей, что в итоге приводит к лучшему качеству использования в реальных ситуациях. Инновационность метода заключается в том, что он не только эффективен, но и гибкий, позволяя интегрироваться с другими техниками увеличения данных. ## Выводы В целом, INSIDE является про