Stack Trace-Based Crash Deduplication with Transformer Adaptation

#### Контекст Стэк-трейс (stack trace) — список вызовов функций в момент сбоя программы — является основополагающим элементом автоматизированных систем отчетации о сбоях в программном обеспечении. Однако значительная доля отчетов о сбоях является дубликатами, что создает значительную нагрузку на разработчиков, затрагивая их время и ресурсы. Традиционные методы дедупликации, основанные на строковой схожести и правилах, не всегда эффективны в учете контекста и структуры стек-трейсов. Это приводит к неэффективности систем отчетации и увеличению сложности масштабирования. Мы предлагаем новую методику, основанную на трансформерах, для эффективной дедупликации стек-трейсов, которая учитывает их глубокую структуру и контекст. #### Метод Мы представляем dedupT, новую модель, основанную на трансформерах, для дедупликации стек-трейсов. dedupT использует предобученную модель языковой модели (PLM) для адаптации к стек-трейсам, а затем применяет полносвязную нейронную сеть (Fully Connected Network, FCN) для оценки степени схожести дубликатов. Модель анализирует стек-трейсы целиком, а не как набор отдельных фреймов, что позволяет лучше понять их структуру и контекст. Кроме того, мы используем методы обучения с подкреплением (reinforcement learning) для оптимизации ранжирования дубликатов. Эта архитектура обеспечивает более точное и эффективное определение дубликатов и уникальных сбоев. #### Результаты Мы провели эксперименты с четырьмя открытыми наборами данных, сравнив dedupT с традиционными методами (смещенной строковой схожестью, последовательным выравниванием) и другими DL-решениями. dedupT показал значительное улучшение в оценке дубликатов и уникальных сбоев. Мы измерили производительность модели по метрикам Mean Reciprocal Rank (MRR) и Receiver Operating Characteristic Area Under the Curve (ROC-AUC), получив результаты, которые превосходят существующие технологии. dedupT показал увеличение MRR до 15% по сравнению с лучшими DL-методами и до 9% по сравнению с традиционными подходами. Это свидетельствует о том, что dedupT эффективнее в уменьшении числа дубликатов и улучшении работы систем отчетации сбоев. #### Значимость Наш подход имеет распространенные применения в автоматизированных системах отчетации и мониторинге программного обеспечения. DedupT может существенно сократить число дубликатов, уменьшить нагрузку на разработчиков и улучшить эффективность систем отслеживания проблем. Благодаря интеграции трансформеров в программное обеспечение, наша работа демонстрирует потенциал новых технологий для улучшения процессов разработки и мониторинга. #### Выводы DedupT демонст