## Контекст Генерация высококачественных и темпорально синхронных аудио файлов из видео является ключевым заданием для видеоредактирования и пост-продакшн. Такой подход позволяет создавать семантически согласованный аудио контент для сильно мультимедийных проектов. Несмотря на прогрессы в области короткоформатного аудио генерирования, существующие методы сталкиваются с проблемами при генерации длительных аудио файлов. Они либо ограничены значительными помехами, либо оперируют неконтролируемыми данными, что приводит к нежелательным артефактам и временным несоответствиям. Данная работа стремится расширить возможности генерации видео-аудио для длительных видео сегментов, обеспечив также чистоту звуковых эффектов без лишних артефактов. ## Метод Методом LD-LAudio-V1 является расширение современных моделей видео-аудио генерации. Он включает в себя два легких адаптера, которые позволяют обеспечить длительную генерацию аудио длиной до 60 секунд. Адаптеры устраняют множество проблем, связанных с настройкой моделей на длительные видео сегменты. Более того, мы представляем чистую, человекоанализированную видео-аудио сеттинг с гарантированной чистотой звуковых эффектов, которая может использоваться в задаче генерации длительных аудио файлов. ## Результаты Мы проводили эксперименты на широком спектре тестовых данных, сравнивая наши результаты с другими моделями. Метод LD-LAudio-V1 показал значительные улучшения по многим метрикам: - **FD_passt**: 450.00 → 327.29 (+27.27%) - **FD_panns**: 34.88 → 22.68 (+34.98%) - **FD_vgg**: 3.75 → 1.28 (+65.87%) - **KL_panns**: 2.49 → 2.07 (+16.87%) - **KL_passt**: 1.78 → 1.53 (+14.04%) - **IS_panns**: 4.17 → 4.30 (+3.12%) - **IB_score**: 0.25 → 0.28 (+12.00%) - **EnergyDelta10ms**: 0.3013 → 0.1349 (+55.23%) - **EnergyDelta10ms(vs.GT)**: 0.0531 → 0.0288 (+45.76%) - **Sem. Rel.**: 2.73 → 3.28 (+20.15%) Эти показатели отражают значительное сокращение артефактов и несоответствий в сравнении с другими моделями, что делает LD-LAudio-V1 более эффективным для генерации длительных видео-аудио файлов. ## Значимость Наш подход может быть применен в многочисленных областях, включая видеомонтаж, аудио переработку и создание синтетического звука. Он значительно сокращает время и сложность процесса генерации, обеспечивая чистый и семантически мотивированный звуковой контент. Высокая точность и эффективность LD-LAudio-V1 делают его привлекательным для профессионалов в области виде