MedKGent: A Large Language Model Agent Framework for Constructing Temporally Evolving Medical Knowledge Graph

## Контекст В последние десятилетия рост объема медицинской литературы представляет собой серьезную проблему для поиска, структурирования и интеграции биомедицинских знаний. Одним из продвинутых подходов является использование знаний в форме графов (Knowledge Graphs, KGs), которые эффективно поддерживают автоматическое обобщение, восстановление информации и выявление знаний. Однако, существующие методы строительства KGs либо ограничены в области применения, либо используют широкомасштабный шанс от LLMs, не учитывая динамику знаний во времени и контекстное неопределенность. Для решения этих проблем предлагается MedKGent, новый фреймворк на основе LLMs для построения динамически изменяющихся KGs в медицинской области. Он основывается на более 10 миллионов абстрактов PubMed, начиная с 1975 года и до 2023 года, и строится при помощи двух специальных агентов, работающих на модели Qwen2.5-32B-Instruct. ## Метод MedKGent использует два основных агента для построения KG. **Extractor Agent** распознает знания в виде троек (субъект-предикат-объект) из текста и присваивает им доверительные оценки с помощью семплирования. Эти оценки используются для исключения низкого-доверительных элементов и для улучшения последующих этапов. **Constructor Agent** принимает доверительные тройки, сортирует их в соответствии с их временными метками и вносит в граф, в то же время разрешая конфликты и укрепляя стабильные знания. Эта последовательность позволяет MedKGent эффективно реагировать на динамические изменения в медицинской литературе, а также обеспечивать высокое качество и точность. ## Результаты Используя 10 миллионов абстрактов, MedKGent построил KG, содержащий 156,275 сущностей и 2,971,384 реляций. Тесты показали, что точность достигает 90% при оценке двумя SOTA LLMs и тремя экспертами в области. Эксперименты по расширенному рассуждению (Retrieval-Augmented Generation, RAG) показали, что MedKGent улучшает результаты на несколько бенчмарок, сравниваясь с лидирующими LLMs. Например, в случае использования в клиническом репутиринге, семплирование доверительных связей позволило увеличить точность инференции. ## Значимость MedKGent предлагает средство для эффективного строительства KGs, которые не только включают статические знания, но и учитывают временную динамику и контекст. Это может быть применено в сферах, таких как клинические решения, лекарственное репутиринг и образование в медицине. Избегая проблем статических KGs, MedKGent предоставляет динамическую модель знаний, усиливая уверенность в выводах и обеспечивая лучшую точность. ## Выводы