L-MARS: Legal Multi-Agent Workflow with Orchestrated Reasoning and Agentic Search

2509.00761v2 cs.AI, cs.CL 2025-09-05
Авторы:

Ziqi Wang, Boqin Yuan

Резюме на русском

## Контекст Область исследования, связанная с системами юридического знания, становится все более значимой в условиях цифровизации. Существуют проблемы, такие как неточности, недостоверность и невозможность полного учета контекста при работе с юридическими данными. Эти сложности проявляются в простых неточностях и неверных выводах, которые могут привести к катастрофическим последствиям. Мотивация для создания L-MARS базируется на необходимости улучшить точность и достоверность юридических ответов, а также обеспечить эффективную обработку текстовых данных в этой области. ## Метод L-MARS (Legal Multi-Agent Workflow with Orchestrated Reasoning and Agentic Search) представляет собой многоагентную систему, которая использует многоуровневую архитектуру для улучшения точности ответов на юридические вопросы. Основную идею системы состоит в разделении запросов на подзапросы и использовании целевых поисковых запросов в различных источниках, включая Интернет, локальные модели RAG (Retrieval-Augmented Generation) и юридические базы судебных решений. Между тем, Judge Agent играет ключевую роль в проверке достаточности, юрисдикции и временной действительности результатов. Этот цикл рассуждения, поиска и проверки позволяет L-MARS поддерживать логическую целостность, отфильтровывать шум и обеспечивать основанные на авторитетных юридических источниках ответы. ## Результаты Результаты экспериментов L-MARS продемонстрировали значительные улучшения точности фактических данных и уменьшение неопределенности. Это достигнуто благодаря использованию многоагентной системы, которая усиливает взаимодействие между различными моделями и источниками. В ходе экспериментов был использован LegalSearchQA, новый бенчмарк, содержащий 200 вопросов юридического характера, собранных в 2025 году. В результате L-MARS не только улучшил фактическую точность, но и получил высокие оценки как от экспертов-юристов, так и от LLM-based judges. Эти результаты подтверждают эффективность многоагентных подходов в обеспечении точности и достоверности в высокорегулируемых сферах, таких как право. ## Значимость L-MARS может быть применен в различных юридических сферах, где точность и достоверность ответов критически важны. Оно предлагает только что развернутое решение для обработки юридической информации, которое может быть реплицировано и использовано в других высокотехнологичных областях. Этот подход обеспечивает повышение точности и надежности ответов, а также уменьшает вероятность утечек и неточностей. Люди, работающие в юридической сфере, могут использовать L-MARS для получения более точных и контекстуально верных ответов, что в с

Abstract

We present L-MARS (Legal Multi-Agent Workflow with Orchestrated Reasoning and Agentic Search), a system that reduces hallucination and uncertainty in legal question answering through coordinated multi-agent reasoning and retrieval. Unlike single-pass retrieval-augmented generation (RAG), L-MARS decomposes queries into subproblems, issues targeted searches across heterogeneous sources (Serper web, local RAG, CourtListener case law), and employs a Judge Agent to verify sufficiency, jurisdiction, and temporal validity before answer synthesis. This iterative reasoning-search-verification loop maintains coherence, filters noisy evidence, and grounds answers in authoritative law. We evaluated L-MARS on LegalSearchQA, a new benchmark of 200 up-to-date multiple choice legal questions in 2025. Results show that L-MARS substantially improves factual accuracy, reduces uncertainty, and achieves higher preference scores from both human experts and LLM-based judges. Our work demonstrates that multi-agent reasoning with agentic search offers a scalable and reproducible blueprint for deploying LLMs in high-stakes domains requiring precise legal retrieval and deliberation.

Ссылки и действия