Beyond the Textual: Generating Coherent Visual Options for MCQs

## Контекст Образовательные вопросы с несколькими вариантами ответов (MCQs) являются одним из основных средств в обучении, позволяющими формировать глубокое понимание и способность к анализу. Исследования, ранее проводившиеся в этой области, фокусировались преимущественно на текстовых вариантах ответов. Однако, в учебных материалах часто присутствуют как текстовые, так и визуальные элементы, что делает важной задачу генерации MCQs с визуальными вариантами ответов. Это приводит к проблемам, связанным с недостаточной разнообразием вариантов ответов и сложностью в создании качественных допущениями. Наше исследование направлено на развитие новых подходов, которые не только улучшат качество генерируемых вопросов, но и устранят эти ограничения. ## Метод Мы предлагаем Cross-modal Options Synthesis (CmOS) — рамоструктурный подход для генерирования MCQs, включающий в себя несколько технологических компонентов. Мы используем Multimodal Chain-of-Thought (MCoT), который позволяет создавать вопросы с разумными вариантами ответов. Для расширения возможностей генерирования включается Retrieval-Augmented Generation (RAG), что обеспечивает доступ к большому количеству знаний. Для выделения вопросов, которые могут быть генерированы с визуальными вариантами, используется модуль дискриминации. В итоге, CmOS объединяет эти компоненты для создания качественных вопросов с визуальными вариантами ответов, что повышает их релевантность и ценность в образовательных рамках. ## Результаты Мы провели эксперименты с тестовыми задачами, используя различные наборы данных и текстовые, а также визуальные варианты ответов. Результаты показали, что CmOS превосходит существующие методы в генерации качественных вопросов с визуальными вариантами ответов. Мы провели анализ яркости ответов и точности генерации, что подтвердило сильные позиции нашей модели. Благодаря интеграции MCoT и RAG, CmOS демонстрирует высокую точность и эффективность, особенно в сфере образовательных задач с визуальными элементами. ## Значимость CmOS может использоваться в различных областях образования, в том числе для создания уроков, тестов и других учебных материалов с визуальными элементами. Он дает преимущество в том, что позволяет генерировать более разнообразные и качественные вопросы, открывая новые возможности для улучшения обучения. Данный подход может положительно сказаться на обучении студентов, повысив их интерес к интегрированной работе с текстом и визуальными материалами. ## Выводы Мы представили CmOS, новый подход к генерации MCQs с визуальными вариантами ответов. Результаты наших эксп