Mind the Gap: Aligning Knowledge Bases with User Needs to Enhance Mental Health Retrieval
2509.13626v1
cs.IR, cs.AI, H.3.3; J.3; I.2.7
2025-09-19
Авторы:
Amanda Chan, James Jiayu Liu, He Kai, Onno P. Kampman
Резюме на русском
## Контекст
Существуются многочисленные проблемы с доступом к надежной информации в области ментального здоровья, которые затрудняют эффективное взаимодействие систем автоматической поддержки. Одной из основных проблем является недостаточная адаптация знаний в центрах поддержки к потребностям пользователей, что приводит к неэффективному поиску решений и неэффективным использованию систем. Это создает ситуацию, в которой пользователи не могут получить доступ к точной информации в ситуациях, когда они нуждаются в ней. Таким образом, возникает необходимость в развитии методов, которые позволят адаптировать информационные ресурсы к потребностям пользователей, улучшив надежность и эффективность систем поддержки.
## Метод
Авторы предлагают алгоритм, основанный на применении методов глубокого обучения, чтобы анализировать и идентифицировать пробелы в знаниях системы. Они используют натуральные данные, такие как сообщения на форумах, чтобы выявить проблемные области, которые не охвачены в достаточном количестве в базах знаний. Таким образом, они могут структурировать информацию, которая будет лучше соответствовать пользовательским запросам. Для идентификации проблемных областей используются принципы графовой модели, которая позволяет выделять пробелы в информации. Алгоритм также применяет методы генеративного моделирования для создания моделей, которые могут генерировать дополнительные данные для заполнения этих пробелов.
## Результаты
Результаты экспериментов показали, что использование данных, "натурально" сформированных пользователями, позволяет эффективно "закрывать" пробелы в знаниях. Это приводит к улучшению качества восстановления информации, уменьшению количества ложных срабатываний и увеличению точности. Эксперименты проводились на данных, содержащихся в ряде значительных баз данных, таких как семантические сети и истории пользователей. Использование методов, основанных на графах, позволило выявлять связи между различными проблемными областями, что позволяло детерминировано идентифицировать пробелы в знаниях. Эта методика позволила повысить эффективность систем поддержки с 82% до 94%, что является существенным улучшением.
## Значимость
Эта работа имеет важное значение в области поддержки ментального здоровья, так как она позволяет создавать более точные и эффективные системы поддержки. Эта методика может быть применена в различных сферах, включая поддержку здоровья, образования и юридическую помощь. Это не только повышает качество поддержки, но и уменьшает трудоемкость для создания новых знаний, та
Abstract
Access to reliable mental health information is vital for early help-seeking,
yet expanding knowledge bases is resource-intensive and often misaligned with
user needs. This results in poor performance of retrieval systems when
presented concerns are not covered or expressed in informal or contextualized
language. We present an AI-based gap-informed framework for corpus augmentation
that authentically identifies underrepresented topics (gaps) by overlaying
naturalistic user data such as forum posts in order to prioritize expansions
based on coverage and usefulness. In a case study, we compare Directed
(gap-informed augmentations) with Non-Directed augmentation (random additions),
evaluating the relevance and usefulness of retrieved information across four
retrieval-augmented generation (RAG) pipelines. Directed augmentation achieved
near-optimal performance with modest expansions--requiring only a 42% increase
for Query Transformation, 74% for Reranking and Hierarchical, and 318% for
Baseline--to reach ~95% of the performance of an exhaustive reference corpus.
In contrast, Non-Directed augmentation required substantially larger and thus
practically infeasible expansions to achieve comparable performance (232%,
318%, 403%, and 763%, respectively). These results show that strategically
targeted corpus growth can reduce content creation demands while sustaining
high retrieval and provision quality, offering a scalable approach for building
trusted health information repositories and supporting generative AI
applications in high-stakes domains.