Beyond Turing: Memory-Amortized Inference as a Foundation for Cognitive Computation
2508.14143v1
cs.LG, q-bio.NC
2025-08-22
Авторы:
Xin Li
Резюме на русском
## Контекст
Исследование сферы искусственного интеллекта (ИИ) стремится решать проблему эффективности вычислений, существующей в стандартных моделях, основанных на градиентном спуске. Одной из подходов является моделирование интеллектуальных процессов через типы инференции, которые используют меморизацию и структурное повторение предыдущих вычислений. Научная публикация "Beyond Turing: Memory-Amotized Inference as a Foundation for Cognitive Computation" рассматривает проблему неэффективности текущих моделей, которые постоянно пересчитывают решения, и предлагает новый подход — **Memory-Amotized Inference (MAI)**. Модель MAI основывается на идее того, что интеллект устроен так, чтобы повторять и использовать ранее полученные решения, а не постоянно пересчитывать их из нуля, что экономит ресурсы и улучшает производительность.
## Метод
Методология, представленная в статье, основывается на идее **Memory-Amotized Inference (MAI)**, которая предлагает новую архитектуру для моделирования интеллектуальных процессов. Модель MAI предполагает, что информация организована в виде циклов в памяти, и что модели должны использовать эти циклы для эффективного вычисления. Эта модель предлагает перевести типичные модели нейронных сетей с градиентного спуска к модели циклов в памяти, что позволяет минимизировать вычислительный затрат и улучшить скорость и эффективность решения задач. Архитектура MAI также включает в себя индуктивные убеждения, которые помогают модели классифицировать и понимать данные с учетом контекста.
## Результаты
Результаты показали, что модель MAI эффективнее в плане вычислений по сравнению с традиционными моделями, которые основываются на градиентном спуске. Эксперименты включали в себя различные задачи, такие как задачи классификации и моделирования текста. Модель MAI демонстрировала значительное улучшение в скорости работы и энергоэффективности, а также способность к более точному пониманию контекста в данных. Данные, использованные в экспериментах, были получены из различных источников, включая общедоступные базы данных и синтетические тестовые наборы. Эти результаты подтвердили, что MAI может быть применена в различных областях, таких как обработка естественного языка, моделирование изображений и другие задачи, требующие высокой производительности и эффективности.
## Значимость
Полученные результаты имеют значительное значение в развитии искусственного интеллекта. Модель MAI предлагает новый подход к моделированию интеллектуальных процессов, который может быть применен в различных областях, таких как обработка естественного языка, глубокое обучение и другие задачи, требую
Abstract
Intelligence is fundamentally non-ergodic: it emerges not from uniform
sampling or optimization from scratch, but from the structured reuse of prior
inference trajectories. We introduce Memory-Amortized Inference (MAI) as a
formal framework in which cognition is modeled as inference over latent cycles
in memory, rather than recomputation through gradient descent. MAI systems
encode inductive biases via structural reuse, minimizing entropy and enabling
context-aware, structure-preserving inference. This approach reframes cognitive
systems not as ergodic samplers, but as navigators over constrained latent
manifolds, guided by persistent topological memory. Through the lens of
delta-homology, we show that MAI provides a principled foundation for
Mountcastle's Universal Cortical Algorithm, modeling each cortical column as a
local inference operator over cycle-consistent memory states. Furthermore, we
establish a time-reversal duality between MAI and reinforcement learning:
whereas RL propagates value forward from reward, MAI reconstructs latent causes
backward from memory. This inversion paves a path toward energy-efficient
inference and addresses the computational bottlenecks facing modern AI. MAI
thus offers a unified, biologically grounded theory of intelligence based on
structure, reuse, and memory. We also briefly discuss the profound implications
of MAI for achieving artificial general intelligence (AGI).
Ссылки и действия
Дополнительные ресурсы: