Street-Level AI: Are Large Language Models Ready for Real-World Judgments?

#### Контекст Область исследования "Street-Level AI" фокусируется на исследовании технологий, которые принимают решения в сферах, требующих социальной ответственности и человеческого вмешательства. Задача LLM (Large Language Models) в этой области — помогать или заменять "street-level bureaucrats", лица, которые принимают решения о присвоении ресурсов и поддержке в условиях ограниченных возможностей. Несмотря на то, что существует обширная литература о философских, этических и юридических аспектах гомонестового браунианского моделирования, есть недостаточно исследований о конкретных реалиях, в которых AI применяется в реальных условиях. Особенно важно рассмотреть, насколько AI может согласовываться с человеческими и официальными методами принятия решений в критически важных областях, таких как распределение ресурсов для бездомных. #### Метод Эксперименты были проведены на реальных данных, маскированных в соответствии с конфиденциальностью, которые отражают реальные ситуации в сфере помощи бездомным. Методология включала сравнение решений LLM с локальным моделированием и человеческими принятием решений. Использовались модели, которые были обучены на регулярных данных и применялись для оценки важности или приоритета. Было изучено соответствие решений, принятых AI моделями, с реальными жизненными ситуациями, включая вопросы несоответствия и упущений. #### Результаты Основные находки показывают, что LLM оказываются непоследовательными в своих решениях, что заметно в разных повторных экспериментах на одних и тех же данных, а также в сравнении решений разных моделей. Эти несоответствия отмечаются как внутри LLM, так и в сравнении с официальными методами, такими как scoring systems, которые используются для оценки возможностей помощи. Однако, в парном тестировании с человеческими решениями, LLM демонстрируют качественную консистентность, в том числе в сравнении с людьми, которые не имеют специальной экспертной подготовки. #### Значимость Находки доказывают, что нынешние LLM еще не готовы к применению в реальных условиях, где решения критически важны. Они могут быть полезны в качестве вспомогательных средств для экспертов, но не для непосредственного принятия решений. Их потенциальное влияние может быть ограничено, пока не будут решены проблемы непоследовательности и несовпадения с методами, которые используются в реальных условиях. Этот подход может быть расширен для других критически важных областей, таких как распределение здравоохранения или услуг в области образования. #### Выводы Основные достижения этих исследований заключаются в том, что невозможность LLM постоянно согласовываться с реальными нуждами и официа