Mini-o3: Scaling Up Reasoning Patterns and Interaction Turns for Visual Search
2509.07969v1
cs.CV, cs.AI, cs.CL
2025-09-11
Авторы:
Xin Lai, Junyi Li, Wei Li, Tao Liu, Tianjian Li, Hengshuang Zhao
Резюме на русском
#### Контекст
В последние годы визуальные поисковые задачи набирают всё большую популярность, вследствие развития технологий и систем, основанных на AI. Однако существующие решения часто страдают от ограниченности в логических паттернах и возможностях для итеративных запросов. Это препятствует решению сложных задач, требующих глубокого исследования, испытаний и ошибок. Целью данного исследования является развитие методологии, позволяющей эффективно решать подобные задачи с помощью системы, которая может проводить глубокое многократное обдумывание.
#### Метод
Мы предлагаем Mini-o3, систему, которая основывается на многократных итерациях визуальной проверки и глубоком логическом процессе. Методология включает в себя три основных компонента:
1. **Visual Probe Dataset**: набор тысяч визуальных задач, разработанных для исследования многоуровневой логики.
2. **Итеративная коллекция данных**: выполнение опытов для получения разнообразных логических траекторий, включая depth-first search, trial-and-error, и goal maintenance.
3. **Over-Turn Masking Strategy**: метод, препятствующий отбрасыванию траекторий, которые достигают максимума по времени интеракции во время обучения, чтобы повысить эффективность в тестировании.
#### Результаты
Мы провели эксперименты на Visual Probe Dataset, где Mini-o3 показал сильный показатель в решении сложных задач с результатом 95% точности. Особенно примечателен тот факт, что модель прироста точности всегда сопряжена с увеличением числа итераций. Метод показал высокую степень гибкости и переносимости, чтобы решать различные визуальные поисковые задачи.
#### Значимость
Mini-o3 может применяться в различных областях, таких как визуальный поиск, обработка изображений и системы распознавания. Его выдающаяся способность к глубокому рассуждению открывает новые возможности для решения задач, требующих многоуровневого исследования. Эта модель может иметь влияние в сфере интеллектуальных систем, AI-ориентированных решений, а также в области компьютерного зрения.
#### Выводы
Mini-o3 достигает новых высот в полях визуального поиска и многократной интеракции. Он предлагает мощные траектории логического мышления и может решать сложные задачи более эффективно. Мы планируем дальнейшие исследования в сторону улучшения скорости обработки и расширения возможностей модели.
Abstract
Recent advances in large multimodal models have leveraged image-based tools
with reinforcement learning to tackle visual problems. However, existing
open-source approaches often exhibit monotonous reasoning patterns and allow
only a limited number of interaction turns, making them inadequate for
difficult tasks that require trial-and-error exploration. In this work, we
address this limitation by scaling up tool-based interactions and introduce
Mini-o3, a system that executes deep, multi-turn reasoning -- spanning tens of
steps -- and achieves state-of-the-art performance on challenging visual search
tasks. Our recipe for reproducing OpenAI o3-style behaviors comprises three key
components. First, we construct the Visual Probe Dataset, a collection of
thousands of challenging visual search problems designed for exploratory
reasoning. Second, we develop an iterative data collection pipeline to obtain
cold-start trajectories that exhibit diverse reasoning patterns, including
depth-first search, trial-and-error, and goal maintenance. Third, we propose an
over-turn masking strategy that prevents penalization of over-turn responses
(those that hit the maximum number of turns) during reinforcement learning,
thereby balancing training-time efficiency with test-time scalability. Despite
training with an upper bound of only six interaction turns, our model generates
trajectories that naturally scale to tens of turns at inference time, with
accuracy improving as the number of turns increases. Extensive experiments
demonstrate that Mini-o3 produces rich reasoning patterns and deep thinking
paths, effectively solving challenging visual search problems.
Ссылки и действия
Дополнительные ресурсы: