LogReasoner: Empowering LLMs with Expert-like Coarse-to-Fine Reasoning for Log Analysis Tasks

#### Контекст Лог-анализ является критическим для мониторинга здоровья систем и диагностики неполадок в сложных системах. Недавние прогрессы в области Больших языковых моделей (LLM) открывают новые возможности для автоматизированного лог-анализа. Однако, общего назначения LLM страдают от недостатка структурированного рассуждательного процесса, который соответствовал бы экспертной мысли и предоставлял точные детали логических шагов. Данный недостаток ограничивает эффективность лог-анализа. Мы предлагаем LogReasoner — фреймворк, который включает в себя два этапа: (1) уточнение коарсе-гранулярного мышления эксперта, где высокоуровневые экспертные мысли формируются из верифицированных потоков устранения неполадок и существующих задач, чтобы обеспечить LLM структурированными рассуждениями, и (2) уточнение файн-гранулярного процесса, где мы оптимизируем LLM для конкретных задач, а также используем методы приоритетного обучения для исправления ошибок и улучшения логической точности. #### Метод LogReasoner включает два основных этапа: (1) **Уточнение коарсе-гранулярного мышления**, где мы создаем структурированные рассуждения на основе экспертных потоков и задач, чтобы обеспечить LLM структурой рассуждения, и (2) **Уточнение файн-гранулярного процесса**, где мы тренируем LLM на задачах специфичных для решения, а затем применяем метод приоритетного обучения, чтобы исправлять ошибки и улучшать логическую точность. Мы применяем LogReasoner к четырем разным лог-аналитическим задачам, используя открытые LLM такие как Qwen-2.5 и Llama-3. #### Результаты Мы проводили эксперименты с LogReasoner на четырёх разных задачах лог-анализа, используя открытые LLM, такие как Qwen-2.5 и Llama-3. Эксперименты показали, что LogReasoner значительно превосходит существующие LLM в показателях эффективности и точности рассуждений. Это подтверждает эффективность LogReasoner в улучшении логических способностей LLM для задач лог-анализа. #### Значимость LogReasoner может применяться в различных лог-аналитических задачах, включая аномалию детектирования, предсказание сбоев и анализ устранения неполадок. Этот фреймворк предоставляет более точные рассуждения и улучшает общую эффективность LLM, что имеет потенциал для повышения эффективности мониторинга и диагностики сложных систем. #### Выводы Мы предлагаем LogReasoner как эффективный фреймворк для стимулирования логических способностей LLM в задачах лог-анализа. Наши результаты показывают, что LogReasoner значительно улучшает точность и эффективность рассуждений LLM. Будущие исследования будут сосредоточены на ра