+VeriRel: Verification Feedback to Enhance Document Retrieval for Scientific Fact Checking

## Контекст Акurate identification of supporting evidence plays ключевую роль в успешном совершении любого вида судебного анализа. Тем не менее, существующие методы в области scientific fact checking сталкиваются с рядовыми ограниченийми, включая неэффективность в рейтинге документов не только по их релевантности, но и по их вкладу в фактографический анализ. Большая часть существующих моделей ориентирована скорее на оптимизацию релевантности, чем на точное выявление соответствий и оценку доказательств, что в свою очередь может привести к ошибочным выводам. Для улучшения этого подхода, в этой работе предлагается +VeriRel – модель, которая включает в себя фидбек верификации в процесс оценки документов. Этот подход значительно улучшает модель с верификационным фидбеком в рейтинге документов, который может быть использован для оценки подтверждающих документов в системах судебного анализа. ## Метод +VeriRel модель включает два основных компонента: классификацию документов по подтверждениям и оценку их вклада в верификационный процесс. Модель использует подходы глубокого обучения для оценки документов в свете их релевантности к судебной теме. Она включает в себя несколько этапов: (1) создание фидбека по верификации, (2) оценка документов по проверке верна наличие в них подтверждающих фактов, и (3) добавление этих результатов в рейтинг документов. Этот метод позволяет значительно улучшить точность и эффективность в рейтинге документов, относящихся к судебной теме. ## Результаты Результаты экспериментов показывают, что +VeriRel значительно превосходит существующие подходы в области scientific fact checking. Анализ проведен на трех наборах данных: SciFact, SciFact-Open и Check-Covid. На этих наборах данных, +VeriRel показала себя как наиболее эффективная в отношении точности в выявлении подтверждающих документов. Этот подход также показал пользующийся его использованием в верификационном процессе, что улучшает оценку верификационных результатов. Эти результаты указывают на то, что интеграция верификационного фидбека к рейтингу документов может значительно повысить качество судебного анализа. ## Значимость +VeriRel модель может быть успешно применена в множестве областей, включая legal analytics и scientific fact checking. Она улучшает точность и эффективность в выявлении подтверждающих документов, что может привести к более тщательной оценке доказательств и, как следствие, к более точным выводам. Важное преимущество этой модели заключается в том, что она позволяет значительно улучшить фактографический анализ, особенно в случаях сложных документов. Это может иметь значительное влияние на судебный анализ, особенно в области