Mind the Gap: Aligning Knowledge Bases with User Needs to Enhance Mental Health Retrieval

2509.13626v1 cs.IR, cs.AI, H.3.3; J.3; I.2.7 2025-09-19
Авторы:

Amanda Chan, James Jiayu Liu, He Kai, Onno P. Kampman

Резюме на русском

## Контекст Существуются многочисленные проблемы с доступом к надежной информации в области ментального здоровья, которые затрудняют эффективное взаимодействие систем автоматической поддержки. Одной из основных проблем является недостаточная адаптация знаний в центрах поддержки к потребностям пользователей, что приводит к неэффективному поиску решений и неэффективным использованию систем. Это создает ситуацию, в которой пользователи не могут получить доступ к точной информации в ситуациях, когда они нуждаются в ней. Таким образом, возникает необходимость в развитии методов, которые позволят адаптировать информационные ресурсы к потребностям пользователей, улучшив надежность и эффективность систем поддержки. ## Метод Авторы предлагают алгоритм, основанный на применении методов глубокого обучения, чтобы анализировать и идентифицировать пробелы в знаниях системы. Они используют натуральные данные, такие как сообщения на форумах, чтобы выявить проблемные области, которые не охвачены в достаточном количестве в базах знаний. Таким образом, они могут структурировать информацию, которая будет лучше соответствовать пользовательским запросам. Для идентификации проблемных областей используются принципы графовой модели, которая позволяет выделять пробелы в информации. Алгоритм также применяет методы генеративного моделирования для создания моделей, которые могут генерировать дополнительные данные для заполнения этих пробелов. ## Результаты Результаты экспериментов показали, что использование данных, "натурально" сформированных пользователями, позволяет эффективно "закрывать" пробелы в знаниях. Это приводит к улучшению качества восстановления информации, уменьшению количества ложных срабатываний и увеличению точности. Эксперименты проводились на данных, содержащихся в ряде значительных баз данных, таких как семантические сети и истории пользователей. Использование методов, основанных на графах, позволило выявлять связи между различными проблемными областями, что позволяло детерминировано идентифицировать пробелы в знаниях. Эта методика позволила повысить эффективность систем поддержки с 82% до 94%, что является существенным улучшением. ## Значимость Эта работа имеет важное значение в области поддержки ментального здоровья, так как она позволяет создавать более точные и эффективные системы поддержки. Эта методика может быть применена в различных сферах, включая поддержку здоровья, образования и юридическую помощь. Это не только повышает качество поддержки, но и уменьшает трудоемкость для создания новых знаний, та

Abstract

Access to reliable mental health information is vital for early help-seeking, yet expanding knowledge bases is resource-intensive and often misaligned with user needs. This results in poor performance of retrieval systems when presented concerns are not covered or expressed in informal or contextualized language. We present an AI-based gap-informed framework for corpus augmentation that authentically identifies underrepresented topics (gaps) by overlaying naturalistic user data such as forum posts in order to prioritize expansions based on coverage and usefulness. In a case study, we compare Directed (gap-informed augmentations) with Non-Directed augmentation (random additions), evaluating the relevance and usefulness of retrieved information across four retrieval-augmented generation (RAG) pipelines. Directed augmentation achieved near-optimal performance with modest expansions--requiring only a 42% increase for Query Transformation, 74% for Reranking and Hierarchical, and 318% for Baseline--to reach ~95% of the performance of an exhaustive reference corpus. In contrast, Non-Directed augmentation required substantially larger and thus practically infeasible expansions to achieve comparable performance (232%, 318%, 403%, and 763%, respectively). These results show that strategically targeted corpus growth can reduce content creation demands while sustaining high retrieval and provision quality, offering a scalable approach for building trusted health information repositories and supporting generative AI applications in high-stakes domains.

Ссылки и действия