PlantVillageVQA: A Visual Question Answering Dataset for Benchmarking Vision-Language Models in Plant Science

## Контекст Область исследования, связанная с визуальным определением заболеваний растений, является ключевой для развития систем автоматического мониторинга. Известные вызовы в этой области включают недостаточное количество качественных данных, отсутствие стандартных датасетов и проблемы с достоверностью моделей. Недостаточная техническая сложность и недостаточное обоснование в многих существующих датасетах снижают их полезность для научных исследований. В этом контексте важно разработать богатый, обоснованный и высококачественный датасет для продвижения исследований в области визуального определения заболеваний растений. ## Метод PlantVillageVQA был создан с использованием широкоизвестного PlantVillage датасета и включает 193 609 вопросов-ответов (QA) разбитых на 14 видов растений и 38 заболеваний. Датасет был структурирован на три уровня сложности вопросов и девять категорий, основанных на тематических областях. Вопросы были сформированы с помощью двухфазного автоматизированного процесса: шаблон-базированная генерация вопросов и лингвистическое переработка. Эксперты проверили каждый вопрос на точность и актуальность. Оценка качества выполнялась с использованием трех современных моделей визуального понимания языка. ## Результаты Изучение датасета показало его широкую пригодность для тренировки и оценки моделей визуального понимания языка в агрономической сфере. Оценка на трех современных моделях демонстрирует высокую точность и стабильность результатов. Эксперименты показали, что датасет может поддерживать достоверное обучение моделей, способных работать в условиях реальных задач агромониторинга. ## Значимость PlantVillageVQA может быть применен в сфере мониторинга растений, сельского хозяйства и агротехнологий. Он обеспечивает богатый набор данных для обучения моделей визуального понимания языка, который позволяет развивать автоматизированные системы диагностики заболеваний растений. Это способствует повышению эффективности, точности и доступности технологий в сельском хозяйстве. Датасет также может быть использован для продвижения исследований в области глубокого обучения и визуального понимания языка. ## Выводы PlantVillageVQA является новым стандартом для датасетов в области визуального понимания языка для задач мониторинга растений. Он подходит для обучения и оценки моделей, а также для продвижения научных исследований в области агротехнологий. Будущие исследования будут сфокусированы на расширении датасета, улучшении достоверности моделей и развитии новых алгоритмов для агрономического мониторинга.