Causal-Counterfactual RAG: The Integration of Causal-Counterfactual Reasoning into RAG

## Контекст Развитие зрения технологий обработки естественного языка (NLP) в последние годы было во многом связано с применением бо LARGE LANGUAGE MODELS (LLMs). Они преобразовали область NLP, расширив возможности применения в различных задачах. Однако, существуют значительные ограничения, связанные с использованием статического знания, которое не позволяет эти модели адаптироваться к динамическим запросам во внешних источниках информации, особенно в знанийно-интенсивных областях. Ретриевл-АГГРЕГАТЕД ГЕНЕРАТИОН (RAG) - это методика, которая объединяет механизмы поиска информации с моделями генеративного моделирования, чтобы улучшить контекстное понимание. Однако, традиционные RAG-системы страдают от разрушения контекста из-за разбиения текста на части и переуверенности в семантической схожести при поиске, что приводит к глубокому ответу и менее точности. Мы предлагаем **Causal-Counterfactual RAG**, новую систему, которая интегрирует эксплицитные казуальные графы, которые передают отношения причины-результат в процесс поиска и включает в себя рациональное решение на основе альтернативных моделей. Наша система не только рассматривает прямую казуальную доказательство, но и контрфактуальность причин, комбинируя оба этих результата для получения более точных, уверенных и интерпретируемых ответов. ## Метод Causal-Counterfactual RAG основывается на двух основных компонентах: **казуальных графов** и **контрфактуальном рассуждении**. Мы используем **эксплицитные казуальные графы**, которые представляют отношения причины-результат, которые получены из существующих источников знаний. Эти графы используются для оценки прямой казуальной доказательство в ответах. Для улучшения точности и глубины ответа, мы внедрили **контрфактуальное рассуждение**, которое рассматривает альтернативные модели и возможные сценарии, чтобы улучшить контекстную когерентность. Мы используем **воронку семантического поиска** для отыскания связанных документов, но в отличие от традиционных методов, мы используем **многослойный поиск**, чтобы улучшить точность взаимосвязи. Модель **RAG** используется для генерации ответов, но мы добавили функции, чтобы учитывать казуальные связи и контрфактуальные модели для повышения точности. ## Результаты Мы провели эксперименты с использованием датасета **Causal-QA**, который содержит задачи, требующие казуального и контрфактуального понимания. Мы сравнивали нашу модель с традиционными RAG-системами. Результаты показали, что **Causal-Counterfactual RAG** значительно улучшила точность ответов, снизила частоту халлуцинаций и повы