DaMoC: Efficiently Selecting the Optimal Large Language Model for Fine-tuning Domain Tasks Based on Data and Model Compression

#### Контекст Large language models (LLMs) показывают выдающиеся результаты при решении общих задач, но сталкиваются с трудностями при применении к доменно-конкретным задачам. Для эффективного использования LLMs в таких ситуациях необходимо их приспособить к конкретным данным и задачам. Эта процедура, известная как fine-tuning, требует значительных ресурсов и времени. Одной из основных проблем является выбор наиболее подходящего модели для fine-tuning. Набор доступных моделей все чаще разнообразится, что делает выбор еще более сложным. Было выдвинуто много работ по оптимизации процесса выбора модели и уменьшению расходов ресурсов. Однако в статье DaMoC: Efficiently Selecting the Optimal Large Language Model for Fine-tuning Domain Tasks Based on Data and Model Compression предлагается новый подход, который использует данные и сжатие моделей для эффективного выбора и применения моделей. #### Метод Система DaMoC решает проблему выбора модели для fine-tuning с помощью двух ключевых компонентов: сжатие данных и сжатие моделей. В первом компоненте, **дата-уровень**, используется систематическая категоризация методов фильтрации данных. Эти методы разделяются на три парадигмы: (1) distribution-aware methods, (2) quality-aware methods, и (3) hybrid approaches. Методы эти способствуют повышению точности и эффективности. Также в рамках DaMoC введена технология **token compression**, которая увеличивает плотность ключевых токенов в тексте. Второй компонент, **модель-уровень**, включает процесс оценки важности слоёв модели с помощью **layer similarity scores**. Менее значимые слои удаляются, и для оставшихся слоёв применяется **sparse merging paradigm** для сохранения возможностей модели. #### Результаты Исследования проводились на четырёх датасетах, связанных с задачами специализированной обработки текста: medical Q&A, financial Q&A, general Q&A и reading comprehension. Эксперименты показали, что DaMoC позволяет выбирать наиболее подходящую модель с издержками в 20 раз меньше времени по сравнению с традиционными методами. Это выигрыш достигается благодаря эффективному сжатию данных и моделей, которое приводит к повышенной точности и уменьшению ресурсоемкости. #### Значимость Решение, предложенное в DaMoC, имеет широкие применения в сферах, где требуется эффективное использование LLMs, например, в медицинской области, финансовой сфере и общем текстовом понимании. Оно позволяет не только экономить ресурсы, но и повысить точность и быстродействие при применении моделей. DaMoC открывает пути для будущих исследований в области сжатия моделей и данных, в том числе развития новых алгоритмов для улучшения точности и эффективности. #### Выводы Работа DaMoC: Efficiently Selecting the Optimal Large Language Model for Fine-tuning Domain Tasks Based on Data and Model Compression демонстрирует значительные достижения в сфере выбора и применения LLMs для доменных задач.