Previously on... Automating Code Review

## Контекст Modern Code Review (MCR) является ключевым элементом современного программного обеспечения. Он позволяет улучшить качество кода, обнаруживать ошибки и повысить производительность разработки. Однако MCR требует значительных вложений времени и ресурсов, что может быть проблемой для больших проектов. В последние годы возникло возросшее интерес к автоматизации центральных задач MCR с помощью машинного обучения (ML) и глубокого обучения (DL). Однако существует значительная разнообразие в задачах, данных и оценках, что сделало этот раздел неполностью охваченным. Наша цель заключается в построении полного обзора исследований в этой области, чтобы определить проблемы, сформулировать рекомендации и помочь улучшить эффективность и стандартизацию. ## Метод Мы провели поиск и анализ 691 публикаций, связанных с автоматизацией MCR, извлекшие 24 релевантных исследования. Для каждого исследования были проанализированы задачи, модели, метрики, базовые значения, результаты, проблемы достоверности и доступность артефактов. Мы также выявили различия в подходах к определению задач, используемым моделям и метрикам, а также выявили недостатки в стандартизации и реинтеграции данных. Это позволило нам выделить основные сложности и предложить рекомендации для повышения эффективности и репликации исследований. ## Результаты Мы обнаружили, что 22 из 48 комбинаций метрик, использованных для оценки моделей, были уникальны для исходных работ. Также обнаружено, что данные, использованные в различных исследованиях, редко реинтегрированы или повторно использованы, что существенно ограничивает возможность сравнения результатов. Было выявлено, что ряд сложностей, таких как временная биаса, редко обсуждаются. Мы также выделили ряд рекомендаций по стандартизации, включая подходы к оценке, определение задач и использование данных. ## Значимость Наши результаты имеют широкое применение в области автоматизации MCR. Они помогают улучшить стандартизацию, уменьшить количество ошибок, повысить эффективность и повысить качество кода. Кроме того, рекомендации могут помочь исследователям избежать распространенных сложностей и создать более гибкие и реплицируемые модели. Наше исследование также открывает новые направления для будущих исследований, в том числе расширения данных, улучшение метрик и объединение различных подходов. ## Выводы Мы представили подробный обзор исследований в области автоматизации MCR, выявили проблемы и предложили рекомендации для улучшения. Наши полученные результаты могут способствовать улучшению стандартов, эффективности и качества кода в программной инженерии. Мы также