Aware First, Think Less: Dynamic Boundary Self-Awareness Drives Extreme Reasoning Efficiency in Large Language Models

```## Контекст Последние достижения в области бо LARGE LANGUAGE MODELS (LLMs) позволили улучшить их возможности для решения сложных задач, включая решение проблем с помощью Long Chain-of-Thought (CoT). Однако данный подход часто связан с значительным издержечным объемом расчётов, что сказывается на эффективности вычислений и отрицательно влияет на реальном времени приложения. Основной причиной этого является то, что существующие методы определяют трудность задач динамически, основываясь на примерах, предоставленных человеком. Это не соответствует самосознанию LLM в отношении своей сложности, что приводит к неэффективности. Данное исследование предлагает решение этой проблемы, разработав систему Dynamic Reasoning-Boundary Self-Awareness Framework (DR. SAF), которая включает в себя три ключевых компонента: Boundary Self-Awareness Alignment, Adaptive Reward Management и Boundary Preservation Mechanism. Эти компоненты позволяют LLMs динамически оценивать свою сложность и корректировать рассуждения в зависимости от сложности задачи, балансируя между эффективностью и точностью. ## Метод DR. SAF использует три ключевых компонента для оптимизации процесса рассуждений LLMs. 1. **Boundary Self-Awareness Alignment**: этот компонент позволяет модели определять свою степень самосознания по отношению к сложности задачи. 2. **Adaptive Reward Management**: этот подход позволяет LLMs адаптировать свои внутренние награды в зависимости от прогресса в решении задачи. 3. **Boundary Preservation Mechanism**: этот механизм гарантирует, что модель сохранит логическую и математическую точность в ходе оптимизации процесса рассуждений. Эти компоненты дают LLMs возможность эффективно адаптироваться к сложности задачи, тем самым повышая общую эффективность. ## Результаты Для оценки эффективности DR. SAF проводились эксперименты на различных наборах данных, включая проблемы с логическим и математическим рассуждением. Эксперименты показали, что DR. SAF позволяет снизить общий объем ответов на 49.27% без существенного потери точности. Кроме того, DR. SAF повышает производительность на 6.59x по отношению к токенам, а также уменьшает время обучения в 5 раз. Эти результаты показывают, что DR. SAF эффективно работает в условиях ограниченных ресурсов, а также превосходит традиционные методы в токенной эффективности с более чем 16% улучшением точности при высокой нагрузке. ## Значимость DR. SAF может быть применено в различных областях, включая реальном времени приложения, социальные сети, системы поддержки принятия решений, где необходима быстрая и точная обработка информации. Основное преимущество DR. SAF заключается в том, что он позволяет значительно повысить эффективность расчётов без потери точности. Это может привести к более быстрому развитию ИИ, по