Generalizable Speech Deepfake Detection via Information Bottleneck Enhanced Adversarial Alignment

## Контекст Современные технологии нейронной синтеза речи позволяют создавать реалистичные аудио-дыбофы, которые представляют серьезную угрозу безопасности. Однако аудио-дыбофы часто варьируются по способу синтеза, рекордеру, способу передачи и другим параметрам, что усложняет их обнаружение. Надежная детекция необходима для защиты от мошенничества, шпионажа и других вредоносных действий. Большинство существующих методов адаптируются только к конкретным видам дыбофов, что приводит к ограниченной обобщаемости. Мы предлагаем общеизучимую модель, которая отличается высокой универсальностью и точностью, способной обнаруживать аудио-дыбофы в различных условиях. ## Метод Мы предлагаем модель **Information Bottleneck enhanced Confidence-Aware Adversarial Network (IB-CAAN)**, которая объединяет несколько ключевых техник. **Confidence-guided adversarial alignment** выявляет и уменьшает специфичные для атаки артефакты без удаления важных объективных признаков. Эта техника позволяет модели ориентироваться только на существенные черты. **Information Bottleneck** уменьшает неинформативную вариативность, такую как голосовые характеристики и условия записи, чтобы сохранить трансферируемые признаки для обнаружения. Архитектура IB-CAAN состоит из нескольких слоев, которые взаимодействуют для обнаружения дыбофов, учитывая общие признаки в различных условиях. ## Результаты Мы проверили модель IB-CAAN на различных датасетах: ASVspoof 2019, ASVspoof 2021, ASVspoof 5 и In-the-Wild. На этих наборах данных IB-CAAN показала стабильно высокую точность, превосходя существующие методы. На ASVspoof 2019/2021 модель демонстрирует **F1-score** в районе **95%**, что значительно превышает базовые результаты. В In-the-Wild условиях IB-CAAN удалось выделить дыбофы с более высокой точностью по сравнению с другими сетями. Эти результаты показывают, что IB-CAAN является оптимальным выбором для обнаружения дыбофов в различных условиях. ## Значимость Модель IB-CAAN может применяться в различных областях, таких как безопасность систем голосовой идентификации, защита от мошенничества и обнаружение поддельных аудио. Универсальность IB-CAAN позволяет ей быть эффективной в различных сценариях, включая ситуации с многочисленными говорящими, разных каналами передачи и различными условиями записи. Такая модель может существенно улучшить уровень безопасности в цифровых системах, защищая пользователей от мошенничества, шпионажа и других вредоносных действий. ## Выводы Мы предложили модель IB-CAAN, которая стабильно превосходит существующие методы в обнаружении аудио-дыбофов. Результаты экспериментов пока