Efficient Strategy for Improving Large Language Model (LLM) Capabilities
2508.04073v1
cs.CL, cs.LG, I.2.7; I.2.6; I.5.1
2025-08-09
Авторы:
Julián Camilo Velandia Gutiérrez
Резюме на русском
Большие языковые модели (LLMs) являются мощными инструментами в AI, но их развертывание сталкивается с ограничениями при ресурсах и ограниченных знаниях. Данная работа предлагает стратегию для улучшения эффективности LLMs с помощью оптимизации данных, обучения и моделирования. Основываясь на магистерской работе, автор определил критерии для сбора надежных данных, проверил различные конфигурации и методы обучения, а также измерил результаты по критериям качества, скорости ответа и безопасности. Эксперименты показали, что сочетание стратегического датасета с уточненными методами моделирования позволяет повысить эффективность LLMs в ресурсозависимых средах и в условиях ограниченных знаний. Эти результаты подтверждают возможность создания более эффективных и безопасных моделей с помощью целенаправленного подхода.
Abstract
Large Language Models (LLMs) have become a milestone in the field of
artificial intelligence and natural language processing. However, their
large-scale deployment remains constrained by the need for significant
computational resources. This work proposes starting from a base model to
explore and combine data processing and careful data selection techniques,
training strategies, and architectural adjustments to improve the efficiency of
LLMs in resource-constrained environments and within a delimited knowledge
base. The methodological approach included defining criteria for building
reliable datasets, conducting controlled experiments with different
configurations, and systematically evaluating the resulting variants in terms
of capability, versatility, response time, and safety. Finally, comparative
tests were conducted to measure the performance of the developed variants and
to validate the effectiveness of the proposed strategies. This work is based on
the master's thesis in Systems and Computer Engineering titled "Efficient
Strategy for Improving the Capabilities of Large Language Models (LLMs)".