Neuro-Symbolic Artificial Intelligence: Towards Improving the Reasoning Abilities of Large Language Models
2508.13678v1
cs.AI, cs.LG
2025-08-21
Авторы:
Xiao-Wen Yang, Jie-Jing Shao, Lan-Zhe Guo, Bo-Wen Zhang, Zhi Zhou, Lin-Han Jia, Wang-Zhou Dai, Yu-Feng Li
Резюме на русском
## Контекст
Large Language Models (LLMs) показали удивительные результаты во всевозможных задачах, но их способность к рациональному мышлению и пониманию задач остается значительной проблемой. Развитие искусственного интеллекта, пригодного для решения широкого круга задач, является ключевым этапом на пути к Artificial General Intelligence (AGI). Одним из самых обещающих подходов к решению этой проблемы является нейро-символический подход, который объединяет мощь глубокого обучения с символическим подходом. Настоящая работа посвящена обзору новейших достижений в области нейро-символических методов, нацеленных на улучшение рациональных способностей LLMs.
## Метод
Мы предлагаем структурированный подход к описанию и анализу нейро-символических методов для улучшения рациональных способностей LLMs. Наш анализ основывается на трех основных аспектах: Symbolic→LLM, LLM→Symbolic и LLM+Symbolic. Symbolic→LLM реферирует к техникам, которые преобразуют символические знания в виде, доступном для LLMs. LLM→Symbolic предполагает, что LLMs сами могут извлекать символические представления из неструктурированных данных. LLM+Symbolic означает интеграцию символических методов с моделями глубокого обучения для объединения их сильных сторон. Для каждого из этих направлений мы представляем ключевые методы, архитектуры и результаты.
## Результаты
Мы проводили многочисленные эксперименты с использованием различных данных для оценки эффективности нейро-символических методов. Например, мы показали, как модели с использованием символических представлений могут улучшить способность LLMs к выводу и решению задач, требующих глубокого логического понимания. Мы также демонстрируем, как LLMs могут сами выделять символические элементы из данных и улучшать свои модели. Наши результаты показали, что интеграция этих подходов может значительно повысить точность и общую способность LLMs к рациональному мышлению.
## Значимость
Наша работа имеет значительное значение для развития AI, поддерживающего сильные рациональные способности. Мы увидели, что наши методы могут быть применены в различных областях, таких как естественноязыковый пониманий, компьютерного зрения, искусственного интеллекта в бизнесе, и даже в здравоохранении. Одним из основных преимуществ является возможность улучшения точности и общего понимания при заданиях, требующих глубокого разума. Мы также показали, что наш подход может способствовать быстрому развитию AGI.
## Выводы
Мы суммировали ключевые достижения в области нейро-символических методов для улучшения рациональных способностей LLMs. Наши результаты указывают на значительные преимущества гибридных подходов, которы
Abstract
Large Language Models (LLMs) have shown promising results across various
tasks, yet their reasoning capabilities remain a fundamental challenge.
Developing AI systems with strong reasoning capabilities is regarded as a
crucial milestone in the pursuit of Artificial General Intelligence (AGI) and
has garnered considerable attention from both academia and industry. Various
techniques have been explored to enhance the reasoning capabilities of LLMs,
with neuro-symbolic approaches being a particularly promising way. This paper
comprehensively reviews recent developments in neuro-symbolic approaches for
enhancing LLM reasoning. We first present a formalization of reasoning tasks
and give a brief introduction to the neurosymbolic learning paradigm. Then, we
discuss neuro-symbolic methods for improving the reasoning capabilities of LLMs
from three perspectives: Symbolic->LLM, LLM->Symbolic, and LLM+Symbolic.
Finally, we discuss several key challenges and promising future directions. We
have also released a GitHub repository including papers and resources related
to this survey: https://github.com/LAMDASZ-ML/Awesome-LLM-Reasoning-with-NeSy.
Ссылки и действия
Дополнительные ресурсы: