OpenWHO: A Document-Level Parallel Corpus for Health Translation in Low-Resource Languages

## Контекст Трансляция в сфере здравоохранения является важной, но высокорискованной областью трансляции, характеризующейся распространенным использованием и уникальным лексиконом. Несмотря на это, недостаточно ресурсов в виде высококачественных данных для обучения машинного перевода в этой области, особенно для низкоресурсных языков. Это ограничивает развитие эффективных систем трансляции в здравоохранении. Отсутствие эффективных тестовых наборов данных для оценки качества перевода в этой сфере существенно мешает развитию технологий. Мы предлагаем OpenWHO, новый документ-уровневый параллельный корпус, содержащий материалы с платформы электронного обучения Международной организации здравоохранения. Этот корпус включает 2,978 документов и 26,824 предложений на 20+ языках, включая 9 низкоресурсных. Наша мотивация заключается в том, чтобы сделать данные доступными для улучшения качества трансляции в здравоохранении для низкоресурсных языков. ## Метод Мы создали OpenWHO как документ-уровневый параллельный корпус, сформированный из материалов с платформы WHO. Эти материалы были написаны экспертами и профессионально переведены, что обеспечивает высокое качество исходных данных. Мы оценили качество перевода с помощью традиционных MT-систем, а также современных ло LLM-систем, включая Gemini 2.5 Flash. Используя различные тестовые наборы, мы изучили, как системы LLM используют контекст уровня документа для улучшения точности перевода. Мы также изучили, как технологии LLM работают в сфере здравоохранения и по каким причинам они могут быть эффективными. ## Результаты Мы провели эксперименты сравнивая традиционные MT-системы с моделями LLM на нашем новом корпусе. Наши результаты показали, что современные модели LLM показывают значительные преимущества в сфере здравоохранения. Например, Gemini 2.5 Flash показал +4.79 ChrF-пунктов улучшение по сравнению с NLLB-54B на низкоресурсных языках. Мы также проанализировали, как различные модели LLM используют контекст в документах для улучшения точности перевода. Результаты показали, что контекст документа значительно повышает точность, особенно в сфере здравоохранения. Это объясняется тем, что в этой области часто используются термины и концепции, которые требуют глубокого понимания контекста. ## Значимость Наш корпус и результаты экспериментов могут быть применимы в различных областях, которые требуют высокой точности в трансляции. Особенно важно это для низкоресурсных языков, где качество перевода часто оставляет желать лучшего. Мы показали, что LLM