Improving the Efficiency of LLM Agent Systems through Trajectory Reduction

2509.23586v1 cs.SE, cs.AI 2025-10-01
Авторы:

Yuan-An Xiao, Pengfei Gao, Chao Peng, Yingfei Xiong

Резюме на русском

## Контекст Large Language Models (LLMs) становятся все более популярными в сфере приложений, включая системы агентов в рамках становления интеллектуальных систем в трехмерной графической среде. Эти системы эффективны в решении задач, особенно в сфере программирования. Однако одной из главных проблем этих систем является высокая вычислительная стоимость. Это связано со сложностью траекторий, которые включают в себя многочисленные действия и слои информации. Несмотря на то, что эффективность этих систем широко изучается, внимание к оптимизации траекторий остается заумным вопросом. Этот аспект является ключевым мотивационным фактором для разработки новых методов снижения траектории. ## Метод Для улучшения эффективности траекторий LLMs-агентов мы предлагаем метод **AgentDiet**. Это подход модифицирует траекторию во время выполнения, удаляя ненужную, повторяющуюся и устаревшую информацию. Мы проводим анализ существующих траекторий, чтобы определить эти элементы и создать алгоритм, который автоматически их удаляет. Метод **AgentDiet** использует простую, но эффективную архитектуру, которая может быть легко интегрирована в существующие системы. Наша инновационная технология может быть применена к различным LLMs-агентам, уменьшая траекторию без потери качества. ## Результаты Мы провели ряд экспериментов, чтобы проверить эффективность **AgentDiet**. Мы использовали несколько LLMs-агентов, включая передовые модели, и две различные бенчмарк-коллекции. Эксперименты показали, что **AgentDiet** уменьшает траекторию на 39,9% ~ 59,7%, при этом сохраняя качество выполнения агента. Это приводит к снижению вычислительного затрат до 21,1% ~ 35,9%, что является ключевым преимуществом. Наши результаты показывают, что траектория может быть эффективно упрощена без потери качества, что является важной оптимизацией для LLMs-агентов. ## Значимость Наши результаты имеют значительное значение для развития LLMs-агентов в сферах, таких как программирование, контент-генерация и интеллектуальные системы. Метод **AgentDiet** позволяет повысить эффективность траекторий, что приводит к уменьшению вычислительных затрат и повышению скорости ответа. Это улучшение может быть применено в системах, где высокая скорость реакции и экономия ресурсов критичны. Развитие таких подходов может вести к новым возможностям в использовании LLMs в различных приложениях. ## Выводы Мы представили **AgentDiet**, метод для уменьшения траектории LLMs-агентов, который позволяет уменьшить вычислительные затраты без потери качества. Н

Abstract

Multi-turn agent systems based on Large Language Models (LLMs) have been increasingly popular for software engineering tasks. While LLM agents show decent effectiveness, the high computational cost of input tokens due to the ever-growing trajectory remains an efficiency concern for their applications. Efficiency is largely neglected in existing studies and agent products, and this paper fills the gap by introducing an inference-time trajectory reduction approach to reduce the cost of agents. Through analyzing existing agent trajectories, we demonstrate that useless, redundant, and expired information is widespread in all trajectories, which can be identified and reduced without harming the agent's performance. We then design a simple yet effective trajectory reduction approach, AgentDiet, which automatically removes such waste information. We implement AgentDiet on a top-performing coding agent, and the evaluation on two LLMs and two benchmarks shows that AgentDiet can reduce input tokens by 39.9% ~ 59.7%, or the final computational cost by 21.1% ~ 35.9%, while maintaining the same agent performance. This indicates that trajectory reduction is a promising direction for agent systems.

Ссылки и действия