CRED-SQL: Enhancing Real-world Large Scale Database Text-to-SQL Parsing through Cluster Retrieval and Execution Description

## Контекст Текстовые-SQL-системы (Text-to-SQL) широко применяются для автоматизации построения SQL-запросов на основе естественного языка (NLQ). Однако, несмотря на улучшения, достигнутые с помощью больших языковых моделей (LLMs), текстовые-SQL-системы сталкиваются с существенными проблемами. Одна из них — семантический разрыв между NLQ и соответствующим SQL-запросом, особенно в больших кросс-доменных базах данных. Этот разрыв приводит к схемной несовпадению (schema mismatch) и семантическому сдвигу (semantic drift) в процессе генерации SQL-запросов. Эти проблемы существенно снижают точность и надежность текстовых-SQL-систем в реальной среде. Мотивация для данного исследования заключается в развитии эффективного подхода, который уменьшает семантический разрыв и повышает точность текстовых-SQL-систем в крупных кросс-доменных базах данных. ## Метод CRED-SQL — это новый подход для решения проблем семантического разрыва в текстовых-SQL-системах. Он состоит из двух основных компонентов: кластерная реtь-схема (Cluster Retrieval) и интерфейс управления выполнением (Execution Description). 1. **Кластерная реtь-схема**: CRED-SQL использует кластеризацию для выявления наиболее подходящих таблиц и столбцов в большой базе данных, относящихся к заданному естественному языковому запросу. Это позволяет уменьшить схемную несовпаденность, связанную с большим числом атрибутов в крупных базах данных. 2. **Интерфейс управления выполнением**: CRED-SQL представляет естественному языку запроса в виде нового языка — Execution Description Language (EDL). Этот язык декомпозирует задачу на две подзадачи: текст-к-EDL и EDL-к-SQL. Это позволяет глубоко интерпретировать запросы с помощью LLMs, что уменьшает семантический сдвиг и повышает точность. ## Результаты Для оценки эффективности CRED-SQL проводились эксперименты на двух крупных кросс-доменных базах данных: SpiderUnion и BirdUnion. Результаты показали, что CRED-SQL превосходит нынешние лучшие решения в метриках точности (accuracy) и F1-меры. Также была проведена сравнительная оценка с другими подходами, и CRED-SQL демонстрирует существенное улучшение в семантической точности и скорости выполнения. Эти результаты подтверждают значительное преимущество CRED-SQL в области текстовых-SQL-систем для крупных кросс-доменных баз данных. ## Значимость CRED-SQL может применяться в различных областях, где требуется автоматизация построения SQL-запросов на основе естественного языка. Например, в системах управления базами данных, в системах аналитики данных и в системах поддержки принятия решений. Одним из главных преимуществ CRED-SQL является его способность эффективно работать с б