How do Language Models Generate Slang: A Systematic Comparison between Human and Machine-Generated Slang Usages

#### Контекст Языковые модели (LLMs) становятся все более эффективными в целях понимания и генерации информации, включая информализированные языковые формы, такие как сленг. Однако сленг, широко используемый в разговорной речи, представляет собой сложную структурную проблему для NLP-систем. Несмотря на то, что LLMs показали качественные результаты в задачах сленговой детекции и интерпретации, их общействовательная значимость определяется точностью и глубиной хранящейся ими информации о сленге. Мы сравниваем гуманные и машиннойсgenerated slang usages (сленговые формы), чтобы изучить соответствие генерируемых моделями сленга типичным гуманным употреблениям. #### Метод Мы использовали два типа данных: сленговые формы из Online Slang Dictionary (OSD) и генерируемые моделями GPT-4 и Llama-3. Для сравнения анализировали три основных аспекта: 1) систематические ошибки в осмыслении LLMs, которые отражаются в сленговых формах; 2) творческой потенциал моделей, отображаемый в новых терминах и использований слов, а также 3) информативность моделей, использованных для моделирования и улучшения генерации сленга. #### Результаты Наше анализируемое сравнение показало, что LLMs эффективно генерируют сленг со структурными сходствами с гуманным сленгом, но существуют заметные ошибки в структуре и ранжировании сленга. Модели хорошо работают в генерации новых терминов, но не достигают полного соответствия лингвистическим моделям, требуемым для анализа. Испытания показали, что LLMs не достаточно многообразны и не отображают социальных и культурных контекстов, которые являются ключевыми для понимания сленга. #### Значимость Наш результат имеет значительное значение во многих областях, включая дизайн языковых моделей, моделирование социальных процессов в машинном обучении и создание более гибких инструментов для интерпретации информализированных текстов. Мы показываем, что LLMs могут расширять свои знания сленга, но для приложениив реальной жизни требуется повышение точности и учет социокультурных контекстов. #### Выводы Наше исследование показало, что, хотя LLMs широко используемы в задачах сленга, они еще не достигли совершенства в генерации и разборе сленга. Будучи ограничены структурными моделями, LLMs не могут выходить за рамки тренировочных данных. Наше исследование указывает на необходимость добавления более широкой социальной и культурной компоненты в обучение моделей, чтобы улучшить их генерацию и анализ сленга