Few-Shot Query Intent Detection via Relation-Aware Prompt Learning

## Контекст Intent detection является ключевым компонентом современных конверсационных систем, так как точное определение пользовательского запроса в начале беседы является важной частью для создания эффективных ответов. Недавние исследования сконцентрировались на изучении этой проблемы в условиях небольшого количества обучающих примеров (few-shot scenario). Большинство из этих подходов полагаются на большие текстовые корпуса для предварительного обучения языковых моделей с помощью различных предтекстовых задач, после чего идет окностройка для задачи определения запросов. Тем не менее, существующие методы в основном сосредоточены на текстовых данных и недостаточно учитывают важные структурные свойства, такие как отношения между запросами и ответами, что может существенно повлиять на точность определения запроса. ## Метод Мы предлагаем новую модель, **SAID (Semantic-Aware Intent Detection)**, которая интегрирует текстовые и структурные свойства в единую модель для предварительного обучения. Модель использует текстовые данные и структуру запросов-ответов для построения модели с более высокой точностью. Мы вводим **QueryAdapt**, механизм, который использует отношения между запросами и ответами на уровне отдельных токенов, чтобы лучше передавать знания и улучшать точность модели. ## Результаты Мы провели эксперименты на двух реальных данныхсказках и получили выдающиеся результаты по сравнению с другими методами. Модель **SAID** показала значительное улучшение в определении запросов по сравнению с предыдущими подходами, особенно в условиях небольшого количества обучающих примеров. Эти результаты подтверждают эффективность интеграции структурной и текстовой информации в модели. ## Значимость Модель **SAID** может быть применена в различных контекстах, включая конверсационные системы, системы поддержки решений и системы управления запросами. Ее преимущества заключаются в том, что она может эффективно использовать структуру запросов, что приводит к более точному определению запросов и улучшению качества общения. Это может существенно повлиять на развитие конверсационных систем, улучшив их точность и полезность для пользователей. ## Выводы Мы предложили новую модель **SAID** для задачи определения запросов в условиях небольшого количества обучающих примеров, которая использует структурные и текстовые данные вместе. Наши результаты показали, что модель превосходит существующие подходы. В будущем мы планируем расширить модель, чтобы она могла работать с более сложными запросами и улучшить ее гибкость в различных контекстах.