Learning Unified Representations from Heterogeneous Data for Robust Heart Rate Modeling

## Контекст Heart rate prediction является ключевым инструментом для персонализированного мониторинга здоровья и фитнеса. Однако, деплой этого процесса в реальном мире сталкивается с значительными вызовами, возникающими из-за **data heterogeneity**. Эта проблема может быть классифицирована на две основные категории: **source heterogeneity**, вызванная разнообразием устройств с разными функциональными характеристиками, и **user heterogeneity**, отражающей различия в физиологических характеристиках и поведении различных индивидуумов и активностей. Традиционные методы, либо не учитывают device-specific information, либо не могут совершенно учитывать user-specific differences, что приводит к ухудшению результатов в real-world сценариях. Наша цель — разработать фреймворк, который учитывает эти сложности и обеспечивает согласованную работу predicition моделей в условиях data heterogeneity. ## Метод Мы предлагаем полностью новый подход к обработке data heterogeneity, основанный на **representation learning** и **contrastive learning**. Для обеспечения robustness к source heterogeneity мы вводим **random feature dropout**, который тренирует модель на разных подмножествах признаков, улучшая ее generalization. Для управления user heterogeneity мы разработали **time-aware attention module**, который моделирует длительные физиологические тренды. Для обеспечения strong discriminative power мы применяем **contrastive learning objective**, который позволяет оптимизировать representation space. Наша модель спроектирована для работы в real-world условиях, а для этого мы создали новую benchmark dataset, **ParroTao**, которая отражает разнообразие источников и участников. ## Результаты Мы проводили эксперименты на двух датасетах: **ParroTao** и **FitRec**. Модель показала **17% и 15% высокой accuracy** в сравнении с existing baselines на этих датасетах. Более того, мы провели анализ люминальных representations, которые показали высокую discriminatory power. Мы также проверили практическую эффективность нашей модели на downstream task, подтвердив ее реальную ценность. ## Значимость Наша модель может быть применена в **personalized health monitoring**, **fitness trackers**, **telemedicine** и других областях, где accuracy heart rate prediction критически важна. Основные преимущества заключаются в: (1) **robustness к data heterogeneity**, (2) **strong discriminatory power** и (3) **practical applicability** в real-world сценариях. Будущие исследования будут направлены на улучшение модели для других physiological signals и расширение ее applicability в различных domain tasks. ## Выводы Мы предложили новый подход к обработке data heterogeneity в heart rate prediction. Наша модель показала высокую точность и robustness в real-world условиях, получив высокую accuracy на ParroTao и FitRec. Это подтверждает ценность нашего подхода для real-world applications. Дальнейшие исследования будут сфокусированы на расширении модели для других physiological signals и ее применении в различных domain tasks.