Artificial Phantasia: Evidence for Propositional Reasoning-Based Mental Imagery in Large Language Models

2509.23108v1 cs.AI, cs.CL, I.2.7 2025-10-01
Авторы:

Morgan McCarty, Jorge Morales

Резюме на русском

## Контекст В настоящее время визуальная ментальная имитажирование считается одним из ключевых способов решения задач, требующих сложного когнитивного поведения. Однако, существуют теории, согласно которым некоторые типы задач могут быть решены без визуального восприятия, а скорее с использованием пропозиционального рассуждения. Участники исследований часто утверждают, что данные задачи не могут быть выполнены без визуальной формы восприятия. Это ставит под сомнение возможность выполнения таких задач с использованием пропозиционального рассуждения. В данном исследовании предлагается новый подход для оценки таких когнитивных процессов в искусственных системах. ## Метод Для проведения исследования были использованы современные технологии в области глубокого обучения и машинного зрелища. Авторы создали новый набор парных изображений, которые были использованы в тестовых задачах. Для тестирования LLMs был применен метод визуального рассуждения, позволяющий изменять изображения в зависимости от выполненных трансформаций. Был также создан референсный тест для людей, чтобы сравнить их результаты с результатами LLMs. Эксперименты проводились на нескольких моделях текстовых LLMs с разным количеством токенов. ## Результаты На основе результатов экспериментов было обнаружено, что лучшие модели LLM могут решать задачи, которые, по идее, требуют визуальной ментальной имитажирование, с уровнем выполнения, превосходящим средний уровень человеческого выполнения. Было обнаружено, что лучшие модели показали высокую эффективность при использовании большего количества токенов для рассуждения. Также было обнаружено, что лучшие LLMs могут показать более высокий результат, чем человеческий уровень, при условии достаточного объема рассуждения. ## Значимость Найденные результаты могут иметь важное значение для развития теорий о визуальных ментальных имитажированиях. Они показывают, что некоторые задачи, которые ранее считались визуально-зависимыми, могут быть выполнены без визуального восприятия, а скорее с помощью пропозиционального рассуждения. Это может иметь значительное значение в развитии новых моделей и технологий, которые могут быть использованы в разных областях, таких как автоматизация, искусственный интеллект, робототехника и многие другие. ## Выводы В итоге, данное исследование демонстрирует, что лучшие модели LLM могут выполнять задачи, которые, по идее, требуют визуальной ментальной имитажирование, используя пропозициональное рассуждение. Это открывает новые возможности для развития искусственного

Abstract

This study offers a novel approach for benchmarking complex cognitive behavior in artificial systems. Almost universally, Large Language Models (LLMs) perform best on tasks which may be included in their training data and can be accomplished solely using natural language, limiting our understanding of their emergent sophisticated cognitive capacities. In this work, we created dozens of novel items of a classic mental imagery task from cognitive psychology. A task which, traditionally, cognitive psychologists have argued is solvable exclusively via visual mental imagery (i.e., language alone would be insufficient). LLMs are perfect for testing this hypothesis. First, we tested several state-of-the-art LLMs by giving text-only models written instructions and asking them to report the resulting object after performing the transformations in the aforementioned task. Then, we created a baseline by testing 100 human subjects in exactly the same task. We found that the best LLMs performed significantly above average human performance. Finally, we tested reasoning models set to different levels of reasoning and found the strongest performance when models allocate greater amounts of reasoning tokens. These results provide evidence that the best LLMs may have the capability to complete imagery-dependent tasks despite the non-pictorial nature of their architectures. Our study not only demonstrates an emergent cognitive capacity in LLMs while performing a novel task, but it also provides the field with a new task that leaves lots of room for improvement in otherwise already highly capable models. Finally, our findings reignite the debate over the formats of representation of visual imagery in humans, suggesting that propositional reasoning (or at least non-imagistic reasoning) may be sufficient to complete tasks that were long-thought to be imagery-dependent.

Ссылки и действия

Связанные статьи

Sticker-TTS: Learn to Utilize Historical Experience with a Sticker-driven Test-T...

#### Контекст Модели большого размера для решения задач логического и математического разума (Large Reasoning Models, LR...

2025-09-09

Instructional Agents: LLM Agents on Automated Course Material Generation for Tea...

## Контекст Подготовка высококачественных учебных материалов является трудоемкой задачей, требующей значительного времен...

2025-08-29