Bias after Prompting: Persistent Discrimination in Large Language Models

#### Контекст Существующие технологии машинного обучения, особенно большие языковые модели (LLMs), становятся все более важными в широких областях применения, включая роботов-консультантов, системы рекомендаций, интеллектуальный анализ, обработку естественного языка и другие. Однако эти модели часто склонны к установленным заблуждениям и дискриминации в отношении различных групп социальных характеристик, таких как возраст, пол, религия и другие. Биазы в моделях не только ограничивают их применение, но и создают потенциальные риски для людей, которые могут быть повлияны на неосновательных основаниях. Обычно считается, что при использовании методов приспособления, таких как применение подсказок (prompting), биазы не переносятся с предварительно обученных моделей на адаптированные. Однако это предположение не было достаточно исследовано. Наша работа стремится установить, насколько актуален этот вывод, используя модели с применением приспособлений подсказок. #### Метод Мы применяем модели с применением подсказок в качестве стратегии приспособления в реальных сценариях использования. Мы строим наши эксперименты с использованием существующих LLM-систем, таких как LLMs с приспособлением подсказак, чтобы изучить, насколько глубоко и часто биазы передаются в адаптированных моделях. Мы изучаем типы дискриминации, связанные с различными группами социальных характеристик, включая возраст, пол, религию и другие. Мы проверяем, насколько эффективны реально существующие методы дебазирования, такие как пробивка приспособленных моделей, и изучаем, каким образом параметры, такие как размер выборки, тип определения и представительность, влияют на степень передачи биаз. #### Результаты Мы выявили, что биазы могут быть переданы с помощью приспособлений подсказок, и что методы дебазирования, основанные на подсказаках, не всегда эффективны в предотвращении передачи биаз. Мы обнаружили, что при сильной корреляции с приспособлением подсказок, биазы в тексте могут быть переданы с моделей, доступных для открытого доступа, в адаптированных моделях. Например, мы изучили существующую модель LLM, которая передает биазы с максимальной корреляцией (rho >= 0.94) по полу в задаче координации, а также различные задачи, такие как вопросы-ответы, где уровень корреляции достигается до 0.98. Мы также показали, что типы дискриминации не зависят от параметров, таких как размер выборки и определение, и что методы дебазирования не постоянно эффективны во всех условиях. #### Значимость Результаты нашей работы могут быть применены в различных сферах, включая роботов-консуль