Look Again, Think Slowly: Enhancing Visual Reflection in Vision-Language Models

#### Контекст Визуальная рационализация (visual reasoning) — это важный аспект искусственного интеллекта, направленный на обработку и анализ визуальной информации с учетом логических правил и контекста. Однако существующие модели визуального рассуждения (visual reasoning models, VRMs) часто способствуют автоматическому построению ответов, недостаточно учитывая визуальные данные или проводя углубленное визуальное обоснование при принятии решений. Эта проблема влечет за собой ограниченность решений и несоответствие реальным обстоятельствам. Были предприняты усилия для передачи техник "медленного мышления" (slow-thinking) из текстовых моделей в VRMs. Однако эти усилия сталкиваются с ключевыми проблемами, включая недостаточное внимание к визуальным данным и слабую возможность визуальной рефлексии (visual reflection) — процесс, когда модель анализирует свои рассуждения на основе визуальных сигналов. #### Метод Для решения этой проблемы мы предлагаем модель \textbf{Reflection-V}, которая улучшает визуальную рефлексию в VRMs с помощью двух основных компонентов: 1. **Конструирование визуально-центрированного контекста рассуждения**. Используя агента, взаимодействующего с моделями языка и визуального рассуждения, мы строим данные, которые стимулируют модели привлекать внимание к визуальным сигналам в ходе рассуждения. 2. **Реабилитация внимания с помощью оптимизации визуальных моделей**. Мы применяем визуальную модель внимания (visual attention) как признак для проектирования наград в обучении с подкреплением (reinforcement learning). Это позволяет модели оптимизировать свой подход к визуальному анализу, стремясь к более точному и визуально обоснованному решению. #### Результаты Мы провели эксперименты на нескольких бенчмарках визуального рассуждения, включая проверку способности моделей к визуальной рефлексии. Результаты показали, что \textbf{Reflection-V} превосходит существующие модели по следующим показателям: - Увеличение внимания к визуальным данным в ходе рассуждения. - Улучшение точности ответов, особенно при сложных задачах визуального анализа. - Уменьшение количества ошибок в ситуациях, требующих глубокого визуального объяснения. Эти результаты подтверждают, что модель \textbf{Reflection-V} не только повышает качество решений, но и обеспечивает более стабильное внимание к визуальным сигналам. #### Значимость Модель \textbf{Reflection-V} может быть применена в различных областях, где важно улучшение визуального рассуждения, включая медицинскую диагностику, анализ видео, управление роботами и другие приложения, требующие точного и визуально обоснованного анализа. Ос