Prompts to Proxies: Emulating Human Preferences via a Compact LLM Ensemble

## Контекст Large language models (LLMs) стали важной частью современной информатики, показав способность эмулировать человеческие ответы в различных задачах. Однако применение LLMs в области социальных наук остается нерешенной проблемой. Одной из основных проблем является высокая стоимость коллекции данных для социальных исследований, а другой — демографическая необратимость результатов, которая мешает точному анализу. Эти проблемы требуют новых подходов для эффективного совершенствования систем понимания человеческих предпочтений. ## Метод Методом решения становится создание управляемой системы, которая моделирует поведение человека с помощью LLM. Эта система состоит из двух фаз. В первой фазе создается персонаж, имитирующий поведение отдельного пользователя, с помощью специальной обработки текста. Во второй фазе выбирается действительно представительное подмножество этих персонажей, чтобы получить достоверный представитель человеческих предпочтений. Использована техника «репликация открытой предпочтения» (revealed preference), чтобы привести LLM к представлению реальных ответов, используя методы структурированного текста, семантического анализа и оптимизации. ## Результаты Для оценки метода применены реальные данные опросов. Наблюдаемая эффективность показана в способности LLM-системы воспроизводить агрегированные ответы с высоким достоверностьным уровнем. Эта система также демонстрирует возможность получения широкого разнообразия ответов, даже без использования демографических данных. Это не только улучшает методы социальных исследований, но и показывает возможность эффективного использования LLMs для решения проблем в этой области. ## Значимость Предлагаемый подход может быть применен в различных сферах социальных наук, включая обзоры, маркетинг и другие области, где требуется понимание человеческих предпочтений. Он позволяет экономить ресурсы и повышает объем и глубину данных, обеспечивая новый подход к исследованию предпочтений. Это также открывает возможности для развития новых методов понимания людьми в социальных системах. ## Выводы Предложенная модель P2P доказала свою эффективность в моделировании человеческих предпочтений с помощью LLM. Она предлагает новый подход к решению проблем демографического разнообразия и стоимости выполнения опросов. Будущие исследования будут фокусироваться на расширении методов во взаимодействии с другими системами и улучшении точности модели.