Perceptual Reality Transformer: Neural Architectures for Simulating Neurological Perception Conditions
2508.09852v1
q-bio.NC, cs.AI, cs.CV, cs.NE
2025-08-15
Авторы:
Baihan Lin
Резюме на русском
## Контекст
Неврологические условия, влияющие на визуальное восприятие, создают существенные разрывы во взаимодействии между пострадавшими и своими близкими, семьями и медицинскими кадрами. Эти различия часто приводят к недопониманию и неэффективности в лечении. Недостаток систематического подхода к моделированию таких ситуаций с ограниченными возможностями для оценки достигнутого реализма ставит перед наукой задачу создания более точных и клинически значимых моделей.
## Метод
Мы предлагаем Perceptual Reality Transformer (PRT) — рамформу, включающую шесть различных нейронных сетей, способных работать вместе для реализации 8 неологических перцептивных условий. Мы использовали визуальные преобразования, основанные на клинических данных, для моделирования условий, таких как синдром Симуань-Баренблата (simultanagnosia), просопагнозия (prosopagnosia), аддитивные дефициты внимания (ADHD), агнозия визуальная (visual agnosia), депрессивные изменения восприятия (depression-related changes), туннельное видение (anxiety tunnel vision) и алцгеймерская эффект (Alzheimer's memory effects). Используя Vision Transformer (ViT) и другие архитектуры, мы достигли оптимальных результатов в двух разных базе данных — ImageNet и CIFAR-10.
## Результаты
Мы провели систематическую оценку PRT с помощью сравнения с традиционными CNN-архитектурами и генеративными моделями. PRT показал значительное превосходство в точности и реализме воспроизведения условий восприятия. Наша работа приводит к систематическому бенчмарку для моделирования перцептивных условий, включая условия, которые ранее не были адекватно моделированы. Мы также представили уникальные конкретные функции пертурбации (perturbation functions), которые были разработаны на основе клинических данных.
## Значимость
Помимо применения в области медицинского образования и эмпатии, PRT может использоваться в сфере создания приспособленных технологий для людей с неологическими расстройствами. Это открывает путь к развитию более глубокого понимания того, как нейронные сети могут моделировать сложные человеческие перцептивные состояния.
## Выводы
PRT достигает значительных успехов в моделировании неологических перцептивных условий с помощью нейронных сетей. Наши результаты устанавливают новые стандарты для бенчмаркинга и моделирования таких условий. Будущие исследования будут фокусироваться на усовершенствовании моделей и расширении перспектив применения в клинической практике и создании системы помощи для людей с неологическими расстройствами.
Abstract
Neurological conditions affecting visual perception create profound
experiential divides between affected individuals and their caregivers,
families, and medical professionals. We present the Perceptual Reality
Transformer, a comprehensive framework employing six distinct neural
architectures to simulate eight neurological perception conditions with
scientifically-grounded visual transformations. Our system learns mappings from
natural images to condition-specific perceptual states, enabling others to
experience approximations of simultanagnosia, prosopagnosia, ADHD attention
deficits, visual agnosia, depression-related changes, anxiety tunnel vision,
and Alzheimer's memory effects. Through systematic evaluation across ImageNet
and CIFAR-10 datasets, we demonstrate that Vision Transformer architectures
achieve optimal performance, outperforming traditional CNN and generative
approaches. Our work establishes the first systematic benchmark for
neurological perception simulation, contributes novel condition-specific
perturbation functions grounded in clinical literature, and provides
quantitative metrics for evaluating simulation fidelity. The framework has
immediate applications in medical education, empathy training, and assistive
technology development, while advancing our fundamental understanding of how
neural networks can model atypical human perception.