Combining Evidence and Reasoning for Biomedical Fact-Checking

Да ## Контекст Загруженность медицинских систем и внезапное возвращение многих заболеваний приводят к углубленному интересу к улучшению методов защиты организма. Одна из самых серьезных проблем в этой области является биомедицинское факт-чекинг, которое способствует улучшению общественного наблюдения за осведомленностью о здравоохранении и доверию к медицинским отделениям. Несмотря на то, что современные технологии машинного обучения и естественного языкового обработки позволяют автоматизировать часть процесса факт-чекинга, эта область остается недостаточно развитой из-за трудностей с верификацией биомедицинских утверждений. Эти утверждения часто имеют сложную терминологию, требуют специализированного знания, и требуют тщательной верификации на основе научных источников. Мы предлагаем **CER** (Combining Evidence and Reasoning), новую систему, которая активно интегрирует основные научные статьи, логическое рассуждение и супервизированные подходы к проверке утверждений. Такая интеграция позволяет проверять утверждения с большей точностью и меньшими рисками генерации нереальных выводов (генерацией "галлюцинаций"). ## Метод **CER** представляет собой инновационный подход, который включает три основных компонента: 1. **Выборка Научных Источников**: Мы используем специальные методы поиска научных статей для определения предметной области утверждения. Эти методы обеспечивают высокую точность выбора источников, чтобы гарантировать, что выводы будут опираться на доказательства. 2. **Логическое Рассуждение**: Для проверки выбранных статей мы применяем методы логического рендеринга и вывода, которые позволяют использовать тексты для глубокого понимания и вывода выводов. 3. **Проверка Утверждений**: Используя супервизированное обучение, мы обучаем модель классификации для выявления достоверности утверждений. Это позволяет системе CER не только выявлять факты, но и оценивать их точность в зависимости от качества документов и контекста. ## Результаты Мы проверили **CER** на трех высококачественных биомедицинских датасетах: **HealthFC**, **BioASQ-7b**, и **SciFact**. Конкурентные модели, такие как SciBERT и PubMedBERT, не достигли такого уровня выстраивания логических выводов и факт-чекинга. Наши результаты показали, что **CER** обеспечивает лучшую точность и генеральную сходимость в сравнении с другими подходами. Один из ключевых показателей — не только количество корректных проверенных утверждений, но и способность не генерировать недостоверные выводы, что является критическим для реальных приложений в этой области. ## Зна