Revisiting Meter Tracking in Carnatic Music using Deep Learning Approaches

## Контекст Метер трекинг (Beat and Downbeat Tracking) является относительно недавной областью исследований в сфере Music Information Retrieval (MIR). Он представляет собой задачу определения настроения и начала каждого такона (beat and downbeat) в музыкальном фрагменте, которая играет ключевую роль в понимании и анализе музыки. Несмотря на то, что дебийн-аппаратура и традиционные сигнальные процессинговые методы были давно заменены глубокими нейросетевыми моделями в Western Eurogenetic genres, где имеются большие аннотированные наборы данных, такая переливательная ситуация не может быть отмечена в отношении музыки Индийского подстрайка, такой как Карнатическая музыка. Этот уникальный и фастичный жанр характеризуется сложным ритмическим устройством и разными метрическими структурами (таласами). Хотя DBN-модели были успешно применены для трекинга таласов в Карнатической музыке, работы по использованию современных deep learning моделей в этой области остаются недостаточно изученными. ## Метод В данном исследовании проводится сравнительный анализ двух моделей метера трекинга: Temporal Convolutional Network (TCN) и Beat This!, на Carnatic Music Rhythm (CMR$_f$) dataset. TCN — это лёгкая архитектура, оптимизированная для ритмов латинских музыкальных жанров, в то время как Beat This! является transformer-based моделью, разработанной для широкого стилистического покрытия без необходимости дополнительной пост-обработки. Модели были сравниваны с DBN-моделью, которая была использована в предыдущих исследованиях. Выборка данных включает 60 треков, каждый аннотированный вручную. Также были применены музыкально обоснованные параметры, такие как размер окна, скорость подачи, и методы метода fine-tuning на Carnatic data. ## Результаты Результаты экспериментов показали, что раннее использованные DBN-модели, хотя и показали неплохой результат, не всегда существенно превосходят TCN и Beat This!, когда они подвергаются transfer learning. Особенно Beat This! показал очень высокую точность в задаче метера трекинга, превзойдя DBN на некоторых показателях. Fine-tuning, в свою очередь, также продемонстрировал положительный эффект, улучшая точность на несколько процентов. Эти результаты указывают, что modern deep learning architectures могут быть эффективно применены к данной трудной задаче, даже в случае недостатка больших аннотированных наборов данных. ## Значимость Результаты этого исследования имеют важное значение для нескольких областей. Во-первых, они показывают, что существующие deep learning модели могут быть успешно применены для трекинга таласов в музыке Карнатического типа, что создает возможность для более широкого применения таких моделей в underrepresented traditions. Во-вторых, они поднимают вопрос о возможности fine-tuning и дополнительных музыкальных п