## КОНТЕКСТ И ПРОБЛЕМАТИКА В настоящее время разработка ИИ сталкивается с значительными проблемами, связанными со скалируемостью и автономностью. Традиционные подходы зависят от больших наборов высококачественных данных и требуют существенных ресурсов для проектирования систем вознаграждения. Эта зависимость создает узкий место, ограничивающий развитие полностью автономных ИИ-систем. Данные проблемы усугубляются тем, что качество данных для обучения и эффективность методов вознаграждения не всегда соответствуют потребностям современных систем. В статье предлагается концепция «Эпохи Опыта», где ИИ-системы самостоятельно формируют данные для обучения. Однако даже в этом случае существует проблема, так как процесс проектирования функций вознаграждения становится новым узким местом. Это приводит к формированию так называемой **grounded-agency gap**, то есть неспособности современных систем ИИ автономно формулировать, адаптировать и достигать целей в динамической среде. ## ПРЕДЛОЖЕННЫЙ МЕТОД Авторы предлагают активное выведение (Active Inference, AIF) как решение для преодоления проблемы автономности. AIF основывается на принципе минимизации свободной энергии, который позволяет агентам самостоятельно балансировать между исследованием и эксплуатацией в своей среде. Этот подход заменяет внешние сигналы вознаграждений на внутренний интригу, позволяя агенту принимать решения на основе унифицированного байесовского подхода. Ключевой момент метода заключается в интеграции Больших Языковых Моделей (LLM) в качестве генеративных моделей мира. Это позволяет создавать агентов, способных эффективно извлекать знания из своих опытов и принимать решения, соответствующие ценностям человека. AIF обеспечивает согласованность и эффективность принятия решений, так как все процессы опираются на единый байесовский объектив. ## ЭКСПЕРИМЕНТАЛЬНЫЕ РЕЗУЛЬТАТЫ В статье приводятся результаты экспериментов, демонстрирующие эффективность AIF в сочетании с LLM. Эти эксперименты показывают, что такие агенты могут эффективно адаптироваться к изменяющимся условиям и достигать целей без необходимости внешних регулятивных сигналов. Данные эксперименты также подтверждают, что использование AIF способно уменьшить зависимость от внешних источников данных и вознаграждений. ## ПРАКТИЧЕСКАЯ ЗНАЧИМОСТЬ Предлагаемый подход имеет широкое применение в областях, требующих автономных и адаптивных систем ИИ. Такие системы могут быть использованы в робототехнике, автономных транспортных системах, медицинском диагностировании и других сферах. Основным преимуществом является уменьшение зависимости от человеческого вмешательства в процессы обучения и вознаграждения, что делает такие системы более эффективными и масштабируемыми. ## ВЫВОДЫ И ПЕРСПЕКТИВЫ Авторы заключают, что AIF представляет собой мощный инструмент для создания автономных ИИ-систем, способных эффективно обучаться из собственного опыта. Будущие исследования могут фокусироваться на дальнейшей реализации и оптимизации этого подхода, а также на интеграции AIF с другими технологиями ИИ для создания более универсальных и эффективных систем.