What Makes LLM Agent Simulations Useful for Policy? Insights From an Iterative Design Engagement in Emergency Preparedness

## Контекст Область исследования сосредоточена на применении бо LLM (Large Language Models) в качестве агентов для социальных симуляций, нацеленных на формирование политик. Несмотря на рост интереса к таким системам, реальное применение остается ограниченным. Авторы исследования стремятся ответить на вопрос: каким образом LLM-симуляции могут стать действительно полезными для политических решений? Для этого они провели годовой эксперимент в сотрудничестве с командой по подготовке к чрезвычайным ситуациям университета. Этот проект включал разработку системы из 13 000 LLM-агентов, моделирующих поведение людей во время крупных массовых мероприятий в условиях различных чрезвычайных ситуаций. Эти симуляции не только использовались для воспитания сознательности, но и влияли на формирование политики, включая тренировку волонтеров, разработку протоколов эвакуации и планирование инфраструктуры. ## Метод Методология основывалась на итеративном подходе к разработке системы симуляционных агентов. Авторы применяли многоэтапную модель, начиная с простых сценариев для установления доверия, затем расширяя систему сложными сценариями, включающими поведение людей и сетевые взаимодействия. Использовались инструменты для анализа данных и моделирования поведения, чтобы выявить ключевые факторы влияющие на эффективность реагирования на ситуации. Основными техническими решениями были использование моделей языка для агентов, интеграция данных о реальных мероприятиях и разработка интерактивной системы для моделирования. ## Результаты В результате исследования были получены три основных типа результатов. Во-первых, симуляционные системы оказались эффективными для того, чтобы проверять гипотезы и выявлять незаметные факторы, которые могут повлиять на реакцию на чрезвычайные ситуации. Во-вторых, система в порядке эксперимента помогла усовершенствовать текущие протоколы, включая тренировку волонтеров и коммуникацию во время массовых событий. Наконец, симуляции стали ключевым инструментом для формирования политики, влияя на мероприятия, посвященные планированию инфраструктуры для более безопасного массового собрания. Эти результаты подтверждают потенциал LLM-симуляций в политическом контексте. ## Значимость Симуляции LLM-агентов могут применяться в различных областях, включая безопасность, экономические стратегии и управление гуманитарными катастрофами. Их преимущества заключаются в том, что они могут помочь во внедрении решений, основанных на реальных данных, а также способствовать более эффективному сотрудничеству