Performance of GPT-5 in Brain Tumor MRI Reasoning

## Контекст Классификация типов мозговых злокачественных опухолей на основе магнитных резонансных изображений (MRI) является критически важной задачей в нейро-онкологии. Точное различение этих типов позволяет выбрать наиболее эффективные методы лечения. Несмотря на развитие методов компьютерного зрения, существуют ограничения в их точности и надёжности. Недавние успехи в области больших языковых моделей (LLM) позволили применять визуальный вопросно-ответной подход (VQA), который объединяет интерпретацию изображений с натуральным языковым рассуждением. Целью данного исследования является оценка потенциала новейших моделей LLM, таких как GPT-4o, GPT-5-nano, GPT-5-mini и GPT-5, в задаче визуального рассуждения о мозговых опухолях. ## Метод Для исследования был создан набор данных, основанный на трёх Brain Tumor Segmentation (BraTS) датасетах: glioblastoma (GLI), meningioma (MEN) и brain metastases (MET). Каждый случай включал многопоследовательные MRI-снимки (три плана) и структурированные клинические признаки, преобразованные в вопросы и ответы в формате VQA. Модели GPT-4o, GPT-5-nano, GPT-5-mini и GPT-5 были применены в "цепочном" режиме рассуждения (chain-of-thought), не имея предварительного обучения на этом датасете. Их успешность оценивалась через достигнутую точность в решении визуальных и рассужденных задач. ## Результаты Количество сценариев, протестированных на каждой модели, составило 150. Наивысшую макро-среднюю точность показала GPT-5-mini (44.19%), следуя за ней GPT-5 (43.71%), GPT-4o (41.49%) и GPT-5-nano (35.85%). Точность различалась в зависимости от типа опухоли. Таким образом, GPT-5-mini и GPT-5 достигли самых высоких результатов, но не совпали с клиническими стандартами точности. ## Значимость Результаты этого исследования показывают, что модели GPT-5 могут обеспечить среднюю точность в нейро-онкологических задачах VQA, но не достигают уровня достоверности, необходимого для клинического применения. Более того, модели показали разное поведение в зависимости от типа опухоли, что может указывать на нужду в дополнительной специализированной обучении. Таким образом, данное исследование способствует развитию ИИ в нейро-онкологии, но также выделяет необходимость дальнейших исследований для достижения более высокой достоверности. ## Выводы Когда-либо GPT-5-family модели могут показать среднюю точность в задаче визуального рассуждения о мозговых опухолях, но не достигают клинически приемлемого уровня достоверности. Будущие исследования должны сфокусироваться на улучшении точности, вк