## Контекст Область систем с управляющим обратным эффектом широко применяется в различных науках и технологиях, где необходимо корректировать поведение системы в реальном времени. Однако в случае с нелинейными системами с неизвестным временем запуска актуатора (actuator delay) возникают серьезные сложности. Эти системы часто применяются в таких областях, как робототехника, промышленность и биотехнологии. Традиционные методы, основанные на теоретической модели, часто неэффективны из-за высокой размерности и неопределенности. Необходимо разработать более гибкие и точные подходы, которые могут устойчиво регулировать такие системы, даже в условиях аналитически неразрешимых проблем. ## Метод Мы предлагаем метод управления, основанный на аппроксимации нейронным оператором (neural operator), который оценивает неизвестные характеристики системы. Этот нейронный оператор обучается однажды в автономном режиме, используя методы машинного обучения. Затем он используется для реализации критерия Фелдберга (Feldbaum’s dual-Youla framework) с помощью оптимизационных процедур. Наш подход адаптируется к различным условиям поведения системы, в том числе интеграции нелинейных моделей и неизвестных параметров. Эта архитектура позволяет добиться высокой точности управления, даже при отсутствии точных моделей. ## Результаты Мы проверяли наш метод на модели биологического активатора-репрессорной системы. Экспериментальные результаты показали, что наша аппроксимация значительно ускоряет процесс управления по сравнению с традиционными методами. В частности, наши результаты показали ускорение в 15 раз по сравнению с обычными численными методами. Это достигается благодаря быстрому вычислительному мощности нейронных сетей и точной аппроксимации нейронным оператором. ## Значимость Предложенный подход имеет широкие области применения, в том числе в биотехнологии, промышленном управлении и робототехнике. Он предлагает более точный и эффективный способ управления нелинейными системами с неизвестным временем запуска актуатора. Важной преимуществом является устойчивость и точность управления, даже в условиях неопределенности. Будущие исследования будут фокусироваться на расширении этого подхода к более сложным системам и интеграции с виртуальными моделями для улучшения реального времени моделирования. ## Выводы Мы установили, что предлагаемый подход позволяет эффективно регулировать нелинейные системы с неизвестным временем запуска актуатора. Он достигает этого благодаря использованию нейронного оператора, который обеспечивает быструю и точную аппроксимаци

#### Контекст Повсеместное распространение ротационных солнечных панелей и устройств управления домашним энергопотреблением делает торговлю электричеством тиражированным (P2P) центральной частью современных систем распределения энергии. Однако большинство существующих моделей и алгоритмов рынков электричества и методов оптимизации рассматриваются с целью максимизировать эффективность или прибыль, не обеспечивая во время реальных операций решения, которые обеспечивают справедливость. Особенно это актуально в условиях неопределенности, когда неравенство может существенно усилиться. Для противостояния этой проблеме предлагается новый подход, основанный на многоагентной мультиагентной оптимизации, который использует критическую роль большой модели языка (LLM) для руководства поведением участников в рынке P2P. #### Метод Предлагаемый подход, FairMarket-RL, основывается на мультиагентной оптимизации, в которой каждый участник рынка выступает в роли агента. Большая модель языка (LLM) используется в качестве критика, который оценивает возможные действия и создает гибкое руководство по поведению. В рамках каждого торгового слота, агенты осуществляют дискретные действия, такие как изменение цены и количества, в рамках двойного аукциона. Оценки справедливости, включающие в себя Grid Fairness (FTG), Between-Sellers Fairness (FBS) и Pricing Fairness (FPP), включены в целевую функцию в виде коэффициентов, которые гармонизируют экономические и социальные цели. Эта система включает запасные ресурсы, предназначенные для оптимизации долгосрочных целей. #### Результаты В экспериментах был продемонстрирован переход от локального рынка до создания широкомасштабного симулированного общества. Был применен реальный датасет, включающий различные активы, и показано, что FairMarket-RL увеличивает процент P2P-торгового обмена, снижает затраты для потребителей по сравнению с традиционным подключением к сети, обеспечивает справедливость во взаимодействии между участниками и сохраняет возможность прибыли для участников. Эксперименты показали, что фреймворк достигает сбалансированного соотношения между экономическими мотивами и социальными ценностями. #### Значимость Предлагаемый подход имеет широкие приложения в сфере управления энергией, включая распределенные системы энергетического управления, P2P-биржи электричества и управление локальными сетями. Он обеспечивает высокую экономическую эффективность, при этом не менее важным является уравновешивание социальных и финансовых мотивов. В долгосрочной перспективе, FairMarket-RL может стать моделью для создания скейли

## Контекст Проблемы идентификации систем в частотном домене заключаются в том, что для точного определения характеристик низкопорядковых систем часто требуется обработать большое количество данных. Это приводит к высоким требованиям к вычислительной мощности и сложности алгоритмов. Для решения этой проблемы необходимо разработать более эффективные методы, которые позволят идентифицировать системы с меньшими вычислительными затратами и более низким порогом входа. Такие методы могут существенно повысить точность информации о системах, используемых в различных областях, таких как электротехника, гидромеханика и авиационная техника. ## Метод Метод предложенных авторов основывается на минимизации оптимизационной функции, которая измеряет расстояние между исходной и измеренной частотной функцией системы. Регуляризация добавляется с помощью ядерного нормата (nuclear norm), что позволяет уменьшить количество параметров и повысить точность. Основная идея заключается в том, чтобы применять теорию выборки для оценки размера выборки, необходимого для достижения определенной точности. Алгоритм решается с помощью техник конвексной оптимизации, что обеспечивает высокую эффективность вычислений. ## Результаты Авторы провели эксперименты, используя синтетические и реальные данные для оценки эффективности метода. Они показали, что использование регуляризации позволяет повысить точность идентификации, особенно при ограниченном количестве выборок. Результаты показали, что метод сокращает количество необходимых выборок в несколько раз по сравнению с традиционными подходами. Это делает метод применимым в ситуациях, когда доступ к данным ограничен. ## Значимость Предложенный подход может быть применен в различных областях, таких как гидромеханика, электротехника и авиационная техника, где необходимо анализировать и идентифицировать системы с ограниченным количеством данных. Он позволяет сократить время обработки данных и улучшить точность, что может иметь положительный эффект на разработку и тестирование систем. Благодаря простоте реализации и эффективности вычислений, метод может быть широко применен в практических задачах. ## Выводы Рассматриваемый метод представляет собой эффективный подход к идентификации низкопорядковых систем в частотном домене. Он позволяет уменьшить количество необходимых выборок, улучшить точность и достичь высокой скорости вычислений. Будущие исследования будут направлены на расширение метода для более сложных систем и исследование его применения в реальных системах.

#### Контекст Область исследования сосредоточена на развитии методов управления, основанных на reinforcement learning (RL), которые могут эффективно решать задачи в условиях сложных, нелинейных систем. Существующие методы часто страдают от недостатка интерпретируемости и надежности, особенно при работе с нелинейными оптимизационными задачами. Мотивацией для разработки новых подходов является необходимость повысить точность, устойчивость и надёжность управляющих систем, особенно при применении в критичных областях, таких как химическая реактивность и авиационная техника. #### Метод Предлагается использовать Y-wise Affine Neural Networks (YANNs) как базовую модель для RL-алгоритмов. YANNs представляют собой интерпретируемые нейронные сети, которые могут точно репрезентативно представить политопические функции с произвольными размерами входа и выхода. Методом инициализации RL-сетей (actor и critic) используется решение многопараметрической линейной модельной прогностической контрольной программы (MPC). Это позволяет YANN-RL начинать работу с уверенностью, основанной на решении линейного контрольного процесса. Для учёта нелинейных систем добавляются дополнительные слои сети, которые обучаются в процессе интерактивного взаимодействия с неизвестной нелинейной системой. Это даёт возможность перейти от линейной модели к решению общих нелинейных задач управления. #### Результаты На исследовательских задачах, таких как подвеска маятника и система реактивного управления с критичными реакциями, YANN-RL продемонстрировала превосходство перед современными RL-методами, в частности, использующими deep deterministic policy gradient (DDPG). Особенно выдающимися результатами оказалось применение YANN-RL в ситуациях, требующих строгого соблюдения безопасностных ограничений. Набор экспериментов показал, что в сравнении с DDPG, YANN-RL обеспечивает улучшение надёжности и эффективности управления в системах с требовательными ограничениями. #### Значимость Разработанный подход может быть применён в различных областях, таких как авиация, роботизация, кибер-физические системы и управление промышленными процессами. Основные преимущества включают высокую точность, интерпретируемость решений и устойчивость к ошибкам. Дальнейшие исследования могут быть направлены на улучшение скорости интерпретации и оптимизации алгоритмов для задач с более высоким размером политопических подмножеств. #### Выводы YANN-RL представляет собой перспективный подход к управлению нелинейными системами, который объединяет преимущества RL и YANNs. Результаты эмпирических экспериментов подтверждают превосходство YANN-RL в сложных задачах упра

## Контекст Оптимизация параметров в распределенных системах с несколькими агентами (distributed multi-agent systems, DMAS) является ключевым вопросом во многих сегментах робототехники и искусственного интеллекта. Например, в автономном вождении автомобилей или коллективных роботах необходимо оптимизировать параметры работы систем, чтобы максимизировать их эффективность, при этом обеспечивая безопасность. Однако, поиск эффективных методов оптимизации в таких системах является сложной задачей из-за необходимости учета общих зависимостей и ограничений, а также неизвестности функций награды и ограничений. Традиционные методы либо не учитывают безопасность, либо страдают от неэффективности в процессе обучения. ## Метод Мы применяем **безопасный байесовский метод оптимизации** (safe Bayesian optimization) с использованием регрессии на основе гауссовских процессов (Gaussian Process Regression, GPR). Этот подход позволяет решать оптимизационные задачи в условиях неизвестности награды и ограничений, а также учитывать безопасность в процессе. Для обеспечения безопасности внедряется механизм **самоучительного подбора параметров**, который предотвращает выход за границы безопасных значений. Распределенная природа системы воспроизводится с использованием **обмена данными между ближайшими агентами**. Для учета взаимодействия между несколькими агентами предлагается **реформулировать глобальную задачу оптимизации как многошаговую задачу локальной оптимизации** для каждого агента, введя время как латентную переменную. Для эффективного использования представлений в пространстве и времени предлагается **специальный спато-временной кернел**, интегрирующий предварительные знания о системе. ## Результаты Мы проводим эксперименты в симуляционной среде, имитирующей распределенные сети агентов. Были протестированы различные кернелы и методы, включая традиционные методы оптимизации и безопасные методы, на основе функций награды и ограничений. Результаты показывают, что предлагаемый подход **выдает лучшие результаты в сравнении с другими методами**, имеет высокую эффективность обучения и обеспечивает безопасность в процессе решения задачи. Особенное внимание уделено устойчивости метода в ситуациях с нестабильными наградами и неизвестными ограничениями. ## Значимость Наш подход может быть применен в различных безопасных распределенных системах, включая автономную логистику, роботы-коллеги, а также моделирование систем с множеством действующих субъектов. Он обеспечивает высокую эффективность и безопасность в процессе решения задач оптими

## Контекст В области контроля и управления существует множество задач, требующих постоянного адаптирования и оптимизации контроллеров для разных задач управления в замкнутом цикле. Эти задачи характеризуются высокими требованиями к эффективности использования данных и гибкости. Однако, существующие подходы часто имеют ограниченную модельность и недостаточную учету структуры задачи. В таких условиях авторы предлагают развить методы, которые бы способствовали эффективному решению этих проблем. ## Метод Предлагаемый подход является новым фреймворком байесовской оптимизации, ориентированным на эффективное управление параметрами контроллеров в ситуациях последовательного принятия решений и контроля в замкнутых циклах. Авторы предлагают использовать гауссовские процессы для построения сложной структуры суррогатной модели. Эта модель учитывает динамику системы, контрольный закон и замкнутую цепь за счет известных выражений. Это позволяет использовать знания о задаче, чтобы улучшить обучение параметров контроллеров. Такой подход позволяет использовать знания о задаче, чтобы улучшить обучение параметров контроллеров. ## Результаты Авторы проводят эксперименты с помощью моделируемого многозадачного управления, используя модели Моделируемого Модельного Управления (Model Predictive Control, MPC). Они показывают, что их подход значительно улучшает эффективность использования данных и гибкость управления в сравнении с классическими методами без знания задачи. Эти результаты подтверждают улучшенную эффективность многозадачного обучения и гибкость метода. ## Значимость Предлагаемый подход может применяться в различных сферах, где необходимо эффективное управление сложными системами, таких как промышленное управление, робототехника и авиационные системы. Он предоставляет значительные преимущества, такие как эффективность использования данных, гибкость и способность передачи знаний между задачами. Это может привести к значительным улучшениям в производительности и экономичности в различных приложениях. ## Выводы Авторы доказывают, что их подход эффективно упрощает процесс обучения параметров контроллеров в замкнутых циклах. Они также утверждают, что их работа открывает пути для будущих исследований в области байесовских методов и многозадачного управления, которые могут привести к более гибким и эффективным системам управления.

## Контекст Model predictive control (MPC) широко применяется в промышленном управлении, благодаря своей понятности и возможности учесть ограничения. Однако MPC, как параметрическая политика в области reinforcement learning (RL), часто страдает от неэффективности в обучении, поскольку поддерживает сильную начальную производительность и требует малого объема данных по сравнению с блэк-бокс-политиками, такими как нейронные сети. Обучение MPC становится сложнее из-за необходимости решения многократных задач оптимального управления, что приводит к высоким затратам на вычисления. Известные методы RL, основанные на первом порядке, неэффективны в этой области, так как весьма трудоемко решать задачи, требующие точного понимания динамики системы. Наша мотивация заключается в развитии более эффективного алгоритма, который бы существенно сократил время обучения MPC, при этом сохраняя высокую точность. ## Метод Мы предлагаем новый подход, основанный на Gauss-Newton и позволяющий уменьшить вычислительные затраты при подгонке MPC-политики. Наш метод отказывается от требования к вычислениям второго порядка, которые традиционно требуются для наилучшего контроля. Вместо этого мы используем приближение для определителя Hessiana, что существенно уменьшает вычислительный вес. Для того, чтобы обеспечить стабильность алгоритма при работе с шумными данными, мы разработали схему скользящего среднего для гессиана. Это позволяет обеспечить гладкую и точную обучение MPC-политик, даже в условиях большого шума в данных. В целом, наш подход значительно улучшает скорость и эффективность в процессе обучения MPC-политик. ## Результаты Мы проверили наш алгоритм на нелинейной модели нетермодинамического реактора. Наши результаты показали, что Gauss-Newton RL для MPC позволяет достичь быстрее требуемого качества управления по сравнению с первоначальными методами. Также, наши результаты показали, что наш метод значительно эффективнее, что дает возможность сократить время обучения и объем необходимого объема данных. Мы показали, что процесс обучения становится более устойчивым и точным в ситуациях, когда размерность пространства параметров высока. Это улучшение в производительности позволяет использовать MPC-политики в более сложных задачах управления. ## Значимость Наш подход может быть применим в различных промышленных системах, где используется MPC, таких как процессы химической промышленности, энергетические системы и другие системы с высокими требованиями к точности и скорости. Помимо этого, новый метод может быть задействован в RL для решения задач с высоким числом параметров, которые требуют низкого объема вычислительных ресурсов. Мы считаем, что наш под

#### Контекст Проблемы в электрических распределительных сетях (EDS) часто приводят к выходу систем из строя, потерей энергии и повышенным рискам для безопасности. Одним из ключевых аспектов эффективного управления EDS является точное выявление и интерпретирование причин выходов из строя. Существующие методы часто ограничены в способности обеспечить полное понимание логики причины-следствие, что приводит к недостаточной надежности системы. Наша мотивация заключается в разработке метода, который бы сочетал мощность графовых моделей, интерпретируемость машинного обучения и подробности самодостаточных объяснений, чтобы улучшить обнаружение и понимание возникших неисправностей. #### Метод Мы предлагаем метод, который использует граф-ориентированные модели для классификации выходов из строя в EDS. Мы строим каскадные графы при помощи трансферной энтропии (TE), где узлы представляют собой фичеры, такие как напряжение и ток, а ребра изображают взаимосвязи между ними. Эти графы далее классифицируются с помощью машинного обучения и GraphSAGE, который учитывает как значения узлов, так и структуру графа. Для того, чтобы улучшить понимание результатов, мы реализовали интегрированный подход, используя GNNExplainer и Captum Integrated Gradients, чтобы выделить те узлы, которые имели наибольшее влияние на полученные прогнозы. #### Результаты Мы проверили наш метод на датасете EDS fault и достигли высокой точности — 99.44%. Это значительно превосходит результаты состояния техники. Кроме того, наш подход не только выдает точные прогнозы, но и предоставляет понятные объяснения для каждого прогноза, позволяя понять причины сбоев. #### Значимость Наш метод может быть применен для улучшения обнаружения неисправностей и уменьшения времени выявления причин в распределительных системах энергии. Он предлагает преимущества в виде лучшей надежности и понимания сетевых проблем, что в конечном итоге может привести к уменьшению времени простоя и улучшению энергетической безопасности. #### Выводы Мы показали, что использование графов для выявления причин-следствий, сочетанное с машинным обучением, является эффективным способом классификации и интерпретации неисправностей в EDS. Наши результаты открывают путь к будущим исследованиям в области применения визуализации графов и повышения точности прогнозов в других областях системных неисправностей.

#### Контекст Dynamic mode decomposition (DMD) является важной методологией для исследования спатиотрепной динамики сложных высокомаерных систем. Она эффективно используется в области анализа данных, включая течение воздуха, механику сплошных тел и динамику гравитационных волн. Однако, существующие DMD-методы ограничены матричными формализмами, что может быть неэффективным для обработки многомерных данных, таких как изображения, видео и высокоградиентные сетки. Эти ограничения влекут за собой потерю информации и неэффективность в задачах, требующих сохранения многомерной структуры. Для решения этой проблемы предлагается расширение DMD на трёхмерные тензоры, используя T-продукт, что позволяет надежно сохранять спатиотрепную и временную структуру данных. #### Метод Для реализации TDMD был развит фреймворк, основанный на T-продукте, который позволяет работать с трёхмерными тензорами. Основные шаги метода включают: 1) тензорное разложение по T-продукту; 2) выделение основных динамических режимов с использованием факторизации тензора; 3) построение реконструкции системы в соответствии с полученными динамическими режимами. Эта архитектура обеспечивает лучшую эффективность и точность в задачах, таких как реконструкция состояний и разделение динамических компонент в многомерных данных. #### Результаты Эксперименты проводились на синтетических и реальных данных. На синтетических данных был проверен точность и скорость вычислений TDMD по сравнению с DMD. На реальных данных, включая изображения и видео, показана эффективность TDMD в сохранении многомерной структуры, что приводит к лучшим результатам в задачах, таких как динамическая реконструкция и разделение компонент. Результаты указывают на преимущества TDMD перед стандартным DMD в обработке многомерных данных. #### Значимость TDMD может применяться в различных областях, таких как динамический анализ изображений, обработка видео, моделирование высокомаерных систем, а также в задачах, требующих хранения и анализа многомерных структур. Он предоставляет более точные и эффективные решения по сравнению с существующими методами. Потенциальное влияние TDMD заключается в улучшении методов анализа данных в области машинного обучения, физики и инженерии. #### Выводы Развитие TDMD является ключевым шагом в расширении возможностей DMD для работы с трёхмерными тензорами. Он позволяет достичь более точных и эффективных результатов в задачах, требующих сохранения многомерной структуры. Будущие исследования будут сконцентрированы на расширении TDMD для более высокоградиентных тензоров

**Резюме** В статье предлагается метод синтеза виртуальных датчиков для оценки состояния заряда (SOC) литий-ионных ячеек, комбинирующий подходы гауссовых фильтров Экстенда и машинного обучения. Главная проблема — недостаточная точность и сглаженность оценок SOC с использованием только традиционных алгоритмов моделирования (виртуальных датчиков на основе ЭКМ и ЭКФ). Решение заключается в сочетании данных, полученных от искусственного нейронного сетевого моделирования ячейки (Affine Parameter-Varying, APV), с линейными наблюдателями, обученными на фичах входных и выходных данных. Обученные наборы данных вводятся в ЭКФ для усовершенствования точности и сглаженности SOC. Результаты экспериментов показали, что предложенный подход существенно повышает точность и сглаженность оценок состояния заряда по сравнению с отдельными методами.