Credence Calibration Game? Calibrating Large Language Models through Structured Play

#### Контекст Large Language Models (LLMs) широко применяются в решении задач, требующих высокой надёжности и точности, таких как юридические системы, здравоохранение и финансы. Однако, несмотря на высокую точность, LLMs часто страдают от проблемы недооценки или переоценки уверенности в своих ответах. Такое поведение может привести к серьёзным последствиям, особенно в критичных для принятия решений сферах. Несмотря на существующие методы повышения калибровки моделей, многие из них требуют дополнительной супервайзированной информации или дополнительных параметров, что усложняет их применение в реальных ситуациях. Наша мотивация заключается в разработке эффективного, простого в использовании и повсеместно применимого метода калибровки, который не требует дополнительных ресурсов. #### Метод Мы предлагаем Credence Calibration Game (CCG) — интерактивную игру с заданными правилами, в косвенном образе напоминающую игру "где-то здесь". Игра представляет собой систему обучения с подкреплением, в которой LLM выступает в роли игрока, получая награду за правильные ответы и наказание за неверные. Основная идея заключается в том, чтобы LLM предсказывала уверенность в своих ответах и получала обратную связь в виде значения, либо совпадения, либо отличия от истинного ответа. Этот подход позволяет модели многократно улучшать свои предсказания, обучаясь на ответах. Игра состоит из серии задач, структурированных таким образом, чтобы модель могла запоминать уровень своей уверенности и корректировать её в ходе игры. #### Результаты Мы проверили нашу модель на нескольких LLMs, включая GPT-3 и RoBERTa, применяя различные наборы данных, в том числе прикладные задачи, такие как классификация и генерация текста. Мы доказали, что наш метод повышает калибровку моделей, снижая ошибки в прогнозах и улучшая уровень уверенности. В экспериментах мы использовали несколько игровых конфигураций, в том числе различные виды заданий и сложности. Результаты показали, что наша модель превосходит существующие методы калибровки в тестах на доверительность и правильности ответов. #### Значимость Наши результаты демонстрируют, что игровой подход может быть применён для калибровки больших языковых моделей, не требуя дополнительных ресурсов или супервайзированных данных. Метод может быть применён в критичных для принятия решений сферах, таких как здравоохранение, финансы и юриспруденция, где надёжные и калиброванные предсказания ключевые. Мы также отмечаем, что наш подход может быть расширен для калибровки других типов моделей искусственного интеллекта, таких как регрессионные модели или нейросети. #### Выво