Multiple Memory Systems for Enhancing the Long-term Memory of Agent

2508.15294v1 cs.AI, cs.CL, cs.MA, I.2.7 2025-08-23
Авторы:

Gaoke Zhang, Bo Wang, Yunlong Ma, Dongming Zhao, Zifei Yu

Резюме на русском

#### Контекст Одним из основных трудностей в развитии интеллектуальных агентов является эффективное использование данных, собранных в ходе их взаимодействий с пользователями. Эти данные, характеризующиеся высокой степенью индивидуальности и разнообразия, требуют постоянного обновления и уточнения для поддержания качества ответов. Существующие системы часто сталкиваются с проблемами плохого качества хранящихся данных, что приводит к неточности ответов и неудовлетворительному пользовательскому опыту. Данная работа стремится решить эту проблему, разработав метод, основанный на теориях когнитивной психологии, для повышения качества долгосрочной памяти агента. #### Метод Многомеморийная система (Multiple Memory System, MMS) предлагает новый подход к обработке и хранению данных. Она разделяет краткосрочную память (STM) на несколько фрагментов долгосрочной памяти (LTM), каждый из которых отвечает за конкретный аспект информации. Далее, эти фрагменты используются для создания двух типов памяти: 1) **референтной памяти (Retrieval Memory Unit, RMU)**, хранящей ключевую информацию для поиска, и 2) **контекстной памяти (Contextual Memory Unit, CMU)**, содержащей подробные данные для сформирования ответа. Механизм поиска привязывает RMU к CMU через уникальный идентификатор, чтобы обеспечить точность восстановления информации. Этот подход позволяет лучше совместить новые данные с уже имеющимися и улучшить качество ответов. #### Результаты Эксперименты проводились на датасете LoCoMo, где MMS сравнивался с тремя существующими методами. Результаты показали, что MMS превосходит конкуренты в качестве реконструкции данных, точности ответа и удовлетворенности пользователей. Анализ абляции подтвердил логичность использования отдельных модулей памяти. Также проведено исследование влияния числа выбранных фрагментов и объема памяти на производительность, подтвердив высокую устойчивость и практическую значимость системы. #### Значимость Метод MMS может применяться в различных областях, где необходимо улучшение качества интеллектуальных систем, таких как чатботы, ассистенты и системы управления информацией. Его основные преимущества заключаются в более точном восстановлении информации, улучшении качества ответов и эффективном использовании исторических данных. Это делает MMS аналитическим инструментом для повышения качества работы систем и повышения удовлетворенности пользователей. #### Выводы Разработанная система MMS демонстрирует высокую эффективность в решении проблемы сбора и использования долгосрочной памяти в системах искусственного интеллек

Abstract

An agent powered by large language models have achieved impressive results, but effectively handling the vast amounts of historical data generated during interactions remains a challenge. The current approach is to design a memory module for the agent to process these data. However, existing methods, such as MemoryBank and A-MEM, have poor quality of stored memory content, which affects recall performance and response quality. In order to better construct high-quality long-term memory content, we have designed a multiple memory system (MMS) inspired by cognitive psychology theory. The system processes short-term memory to multiple long-term memory fragments, and constructs retrieval memory units and contextual memory units based on these fragments, with a one-to-one correspondence between the two. During the retrieval phase, MMS will match the most relevant retrieval memory units based on the user's query. Then, the corresponding contextual memory units is obtained as the context for the response stage to enhance knowledge, thereby effectively utilizing historical data. Experiments on LoCoMo dataset compared our method with three others, proving its effectiveness. Ablation studies confirmed the rationality of our memory units. We also analyzed the robustness regarding the number of selected memory segments and the storage overhead, demonstrating its practical value.

Ссылки и действия