A RoBERTa-Based Functional Syntax Annotation Model for Chinese Texts

#### Контекст Систематическая функциональная грамматика (Systemic Functional Grammar, SFG) и её ветвь, кардиффская грамматика, широко применяются в дискурс-анализе, исследованиях семантических функций и других задачах по разным языкам и текстам. Однако автоматизированная система аннотации на основе этой теории для китайских текстов до сих пор отсутствует. Это существенно ограничивает применение и распространение соответствующих теорий. Данное исследование предлагает новую модель аннотации функциональной синтаксической грамматики для китайских текстов, основанную на RoBERTa (Robustly Optimized BERT Pretraining Approach). Модель позволяет автоматизировать анализ языковой структуры китайских текстов, облегчая их исследования и применение в различных областях. #### Метод Модель тренировалась на основе 4,100 словажных предложений из корпуса People's Daily 2014. Для обучения использовался fine-tuning метод, применяясь к модели RoBERTa-Chinese wwm-ext. Эта модель была адаптирована для распознавания именованных сущностей (Named Entity Recognition, NER). Задачу NER решались на основе теории функциональной синтаксической грамматики, что позволило обнаружить основные синтаксические элементы как Subject (S), Main Verb (M), так и Complement (C). Алгоритмы были разработаны с использованием технологий интенсивной обработки текстов и методов машинного обучения. #### Результаты В ходе экспериментов был получен F1-метр в 0.852 для тестового набора данных, что значительно превосходит результаты других сравнимых моделей. Модель аннотировала языковые элементы текста, получив высокую точность в распознавании главных синтаксических компонентов. Однако обнаружены проблемы при работе с балансом меток в небольших классах сущностей. Это ставит перед тем, что ещё есть потенциал для улучшения модели, особенно при работе с редкими или неравномерно распределенными классами. #### Значимость Разработанная модель может применяться в решении задач естественного языкового процессинга (NLP), включая дискурс-анализ, семантическое исследование текстов и другие задачи, где требуется функциональный анализ языка. Особенно она подходит для языков с богатой синтаксической структурой, таких как китайский. Модель демонстрирует высокую эффективность в распознавании синтаксических структур и имеет перспективу для расширения в другие естественные языки, что может способствовать более широкому применению теории функциональной синтаксической грамматики в машинном обучении. #### Выводы Данное исследование представляет первую попытку интеграции теории функциональной синтаксическо