Classification of kinetic-related injury in hospital triage data using NLP

## Контекст Триаж-заметки, создаваемые в начале пациентского посещения в больнице, содержат ценные сведения, которые могут помочь медицинским персоналу и исследователям понять эпидемиологию пациентов в отделе неотложной помощи и степень временности заболевания или травмы. Однако применение современных технологий естественного языкового обработки (NLP) и машинного обучения (ML) для анализа триажных данных сталкивается с рядом проблем. Во-первых, госпитальные данные содержат чрезвычайно чувствительную информацию, которая подлежит законам о защите приватности, и поэтому должна анализироваться на месте. Во-вторых, большинство госпиталей и медицинских учреждений не обладают необходимым оборудованием для тонкой настройки больших языковых моделей (LLM), а вовсе не готовы к их обучению с нуля. Наконец, для идентификации записей, требующих внимания, требуется экспертное вовлечение в ручной пометке данных, что требует много времени и стоит дорого. Мы представляем в данной работе процесс, который позволяет классифицировать триажные данные с помощью LLM и ограниченных вычислительных ресурсов. ## Метод Мы использовали предобученную LLM, классификатор, который был быстро приведен к успешной работе на маленьком (2K) открытом наборе данных с помощью GPU. Затем, для приспособления к определенному госпитальному набору данных (1K примеров), мы продолжили обучение модели на CPU. Это позволило нам удачно классифицировать триажные данные с ограниченными вычислительными ресурсами. Мы демонстрируем, что строго выбранные наборы данных и использование уже существующих моделей и открытых данных могут обеспечить успех в классификации триажных записей даже на ограниченных мощностях. ## Результаты Мы провели эксперименты с небольшим набором открытых данных (2K примеров) и госпитальным набором данных (1K примеров), используя LLM. Для тонкой настройки использовались GPU и CPU соответственно. В результате получили высокую точность классификации, даже при ограниченных вычислительных ресурсах. Это позволило успешно идентифицировать критические триажные записи с первичной классификацией. ## Значимость Представленный подход может применяться в различных областях, таких как мониторинг здоровья, оптимизация ресурсов госпиталей и улучшение заболеваемости. Он предлагает более эффективный и экономичный способ использования LLM в здравоохранении. Мы видим возможность использования этой модели для быстрого определения критических случаев в время реального времени, что может способствовать более точному вмешательству в критических ситуациях. ## Выводы Мы успе