Scaling Environments for Organoid Intelligence with LLM-Automated Design and Plasticity-Based Evaluation

## Контекст Современные искусственные системы, включая искусственные нейронные сети, продолжают показывать впечатляющие достижения в области обработки информации и принятия решений. Однако их работа часто ограничивается качеством обучения, основывающимся на статических данных и неявных моделях обучения. Биологические нейронные сети, напротив, обладают уникальными способностями к обучению, включая динамическую пластичность и возможность взаимодействия с окружающим миром. Однако создание экспериментальных сред, которые могли бы эффективно использовать эти способности, остается значительной проблемой. Это формирует мотивацию для развития новых подходов к созданию сред, которые могут пробуждать к жизни и продолжать развиваться в своих возможностях. ## Метод Мы предлагаем расширенный фреймворк, который расширяет применение систем обучения с подкреплением к новому классу агентов — нейроорганоидам. Методология основывается на разработке скалябельных, замкнутых циклов виртуальных окружений, которые способны обучать нейроорганоиды, а также изучать механизмы знаний, такие как долговременная потенциация (LTP) и долговременная депрессия (LTD). Три разных вида задач были разработаны, каждая из которых увеличивает сложность и затрагивает различные аспекты обучения: (1) задача условного избегания, (2) одномерная сценарий предателя-жертвы, и (3) воспроизведение классической игры Pong. Для каждой задачи сформализованы пространство состояний, пространство действий, механизмы восприятия и декодирования сенсора, а также протоколы обратной связи, основанные на вознаграждении и наказании. Мы также предлагаем мета-подход к обучению, в котором LLM автоматизирует процессы подготовки экспериментов и оптимизации сред. Наконец, мы предлагаем многомерный подход к оценке обучения, включающий электрофизиологические, клеточные и молекулярные уровни синаптической пластичности. ## Результаты Мы провели эксперименты с каждым из трех разработанных окружений, используя нейроорганоиды, которые были успешно обучены в разных задачах. Наша система успешно демонстрирует возможность обучения нейроорганоидов в структурированных средах, демонстрируя синхронную работу всех компонентов фреймворка. Мы также заметили, что система LLM-автоматизированного управления экспериментами не только эффективно разрабатывает среды, но и увеличивает скорость и точность при подготовке экспериментов. ## Значимость Наш подход открывает новые возможности в области нейроорганоидных исследований, позволяя исследовать проблемы