Overview of BioASQ 2024: The twelfth BioASQ challenge on Large-Scale Biomedical Semantic Indexing and Question Answering

2508.20532v1 cs.CL, cs.AI, cs.IR 2025-08-30
Авторы:

Anastasios Nentidis, Georgios Katsimpras, Anastasia Krithara, Salvador Lima-López, Eulàlia Farré-Maduell, Martin Krallinger, Natalia Loukachevitch, Vera Davydova, Elena Tutubalina, Georgios Paliouras

Резюме на русском

#### Контекст BioASQ 2024 — это двенадцатый этап международного соревнования по биоинформатике, которое организуется в рамках конференции и лабораторий оценки (Conference and Labs of the Evaluation Forum, CLEF) 2024. Задача состоит в развитии методов широкомасштабного биомедицинского семантического индексирования и ответов на вопросы. Этот проект способствует развитию методов оценки систем получения информации в медицине и биологии, а также содействует повышению качества информационных систем в этих областях. Основные проблемы, которые решаются в рамках BioASQ, заключаются в улучшении точности и скорости обработки биомедицинских текстов, а также в развитии методов выделения и индексирования семантических сущностей в больших биоинформатических коллекциях. #### Метод В соревновании приняли участие 37 команд, подавших более 700 заявок на четыре разных задачи. Задачи включали: Task a — MultiCardioNER, которая затрагивала настройку систем на детектирование клинических сущностей в контексте кардиологии на многоязычных данных; Task b и Task Synergy — уже имеющиеся задачи, связанные с поиском и индексированием биоинформатических данных; Task BIONNE — задача распознавания названий сущностей в русском и английском языках с учетом вложенных структур. Участникам предоставлялись большие объемы данных, включая биомедицинские статьи, которые необходимо было обработать с использованием различных методов, включая машинное обучение, естественное обучение, сопоставление и описательные методы. #### Результаты В результате соревнования были получены высокоточные результаты, подтверждающие прогресс в области биоинформатики. Задача MultiCardioNER демонстрировала высокую точность в распознавании сущностей, в то время как задача BIONNE продемонстрировала прогресс в распознавании вложенных сущностей в русском и английском языках. Задачи Task b и Synergy также демонстрировали прогресс в области биоинформатического поиска и индексирования. В целом, команды достигли высокого уровня производительности, подтверждая развитие состояния технологий в области биоинформатики. #### Значимость Результаты этого соревнования имеют высокую значимость для развития технологий в области биоинформатики и медицины. Они могут применяться для создания более точных и быстрых систем поиска информации в биомедицинских текстах, что влечет за собой улучшение качества оказания медицинской помощи и увеличение эффективности научных исследований. Инновационные методы, разработанные в рамках этого соревнования, могут быть использованы в различных областях, включая клиническую практику, науч

Abstract

This is an overview of the twelfth edition of the BioASQ challenge in the context of the Conference and Labs of the Evaluation Forum (CLEF) 2024. BioASQ is a series of international challenges promoting advances in large-scale biomedical semantic indexing and question answering. This year, BioASQ consisted of new editions of the two established tasks b and Synergy, and two new tasks: a) MultiCardioNER on the adaptation of clinical entity detection to the cardiology domain in a multilingual setting, and b) BIONNE on nested NER in Russian and English. In this edition of BioASQ, 37 competing teams participated with more than 700 distinct submissions in total for the four different shared tasks of the challenge. Similarly to previous editions, most of the participating systems achieved competitive performance, suggesting the continuous advancement of the state-of-the-art in the field.

Ссылки и действия