NomicLaw: Emergent Trust and Strategic Argumentation in LLMs During Collaborative Law-Making
2508.05344v1
cs.AI
2025-08-09
Авторы:
Asutosh Hota, Jussi P. P. Jokinen
Резюме на русском
## КОНТЕКСТ И ПРОБЛЕМАТИКА
Современные крупные языковые модели (LLM) продемонстрировали выдающийся прогресс в решении задач правового толкования, аргументации и стратегического взаимодействия. Однако эмпирическое понимание поведения LLM в открытых многокомпонентных сценариях, особенно связанных с обсуждением правовых и этических дилемм, остается крайне ограниченным. Существующие исследования в основном фокусируются на изолированных задачах и не раскрывают комплексные динамики коллективного принятия решений в правовой сфере.
Проблематика статьи заключается в отсутствии систематического подхода к анализу того, как LLM взаимодействуют друг с другом при создании правовых норм в условиях многокомпонентной среды. Особенно актуальными являются вопросы формирования доверия между агентами, проявления реципрокности в голосованиях и использования стратегического языка для влияния на коллективные решения. Эти аспекты критически важны для понимания потенциала LLM в автономной разработке законодательства и правовых норм.
Авторы подчеркивают, что ограниченность текущих знаний о поведении LLM в правовых контекстах сдерживает развитие AI-систем, способных к автономной разработке и адаптации правовых норм. Необходимость в создании таких систем возрастает в условиях увеличения сложности правовых регуляций и необходимости динамической адаптации законодательства к новым вызовам. Статья стремится заполнить этот пробел путем создания структурированной многокомпонентной симуляции, в которой LLM участвуют в коллективном правотворчестве.
## ПРЕДЛОЖЕННЫЙ МЕТОД
Авторы представляют NomicLaw - инновационную многокомпонентную симуляцию, в которой LLM участвуют в коллективном правотворчестве. Система структурирована следующим образом: каждый агент-LLM получает сложную правовую виньетту и должен предложить конкретное правило для регулирования описанной ситуации. Процесс включает три ключевых этапа: предложение правил, обоснование принципов и голосование за предложения коллег.
Методология измерения доверия и реципрокности основана на квантитативном анализе паттернов голосования. Система отслеживает, как агенты голосуют за предложения других участников, выявляя паттерны взаимной поддержки и предательства доверия. Качественный анализ фокусируется на том, как агенты используют стратегический язык для обоснования своих предложений и влияния на коллективные решения.
Архитектура эксперимента включает как однородные группы (агенты на основе одной модели), так и гетерогенные группы (различные модели LLM). Это позволяет исследовать, как различия в архитектуре и обучении моделей влияют на коллективную динамику. Симуляция разработана таким образом, чтобы выявить спонтанное формирование альянсов между агентами, проявления предательства доверия и адаптивное изменение риторики в ответ на действия других участников.
## ЭКСПЕРИМЕНТАЛЬНЫЕ РЕЗУЛЬТАТЫ
Эксперименты были проведены с участием десяти открытых LLM, охватывающих различные архитектуры и размеры моделей. Для каждой модели были созданы сценарии с однородными и гетерогенными группами, что позволило сравнить поведение моделей в разных контекстах. Правовые виньетты были тщательно подобраны для представления сложных этико-правовых дилемм, требующих сбалансированного подхода.
Квантитативные результаты показали заметные различия в паттернах голосования между различными моделями. Некоторые модели демонстрировали высокие уровни реципрокности, последовательно поддерживая предложения агентов, которые ранее поддержали их инициативы. Другие модели проявляли более индивидуалистическое поведение, фокусируясь исключительно на содержании предложений без учета истории взаимодействий.
Качественный анализ раскрыл сложные стратегии использования языка. Агенты адаптировали свою риторику в ответ на действия других участников, используя более убедительные аргументы при необходимости заручиться поддержкой. Были зафиксированы случаи формирования стабильных альянсов между определенными моделями, а также инциденты предательства, когда агенты меняли свою позицию
Abstract
Recent advancements in large language models (LLMs) have extended their
capabilities from basic text processing to complex reasoning tasks, including
legal interpretation, argumentation, and strategic interaction. However,
empirical understanding of LLM behavior in open-ended, multi-agent settings
especially those involving deliberation over legal and ethical dilemmas remains
limited. We introduce NomicLaw, a structured multi-agent simulation where LLMs
engage in collaborative law-making, responding to complex legal vignettes by
proposing rules, justifying them, and voting on peer proposals. We
quantitatively measure trust and reciprocity via voting patterns and
qualitatively assess how agents use strategic language to justify proposals and
influence outcomes. Experiments involving homogeneous and heterogeneous LLM
groups demonstrate how agents spontaneously form alliances, betray trust, and
adapt their rhetoric to shape collective decisions. Our results highlight the
latent social reasoning and persuasive capabilities of ten open-source LLMs and
provide insights into the design of future AI systems capable of autonomous
negotiation, coordination and drafting legislation in legal settings.
Ссылки и действия
Дополнительные ресурсы: