## Контекст В статье предлагается MonoCon, новшество в области метрического обучения, которое использует функциональные ограничения для повышения качества и эффективности представлений. Данный подход является альтернативой традиционным архитектурным и оптимизационным методам. Он включает монотонную нейронную сеть (MLP), которая подключается к предварительно обученной сети. Использование контрастивной функции потерь и монотонных ограничений позволяет MonoCon формировать высококачественные, дисэнтентностные и компактные представления, в то же время сохраняя высокую точность классификации. MonoCon представляет собой общую модель, применимую к различным задачам, от классификации изображений до выработки представлений для текстовых данных. ## Метод MonoCon состоит из двух основных компонентов: предварительно обученной сети и монотонной нейронной сети (MLP). Обучение происходит с использованием контрастивной функции потерь, при которой нейронная сеть и монотонный MLP координируются друг с другом. Это приводит к формированию устойчивых, компактных и дисэнтентных представлений. Во время тестирования MLP используется в качестве эмбеддинг-головки, что позволяет сократить размер представления, не теряя в качестве. Таким образом, MonoCon предлагает простой и эффективный подход к обучению высококачественных представлений, используя функциональные требования. ## Результаты Эксперименты показали, что MonoCon значительно улучшает сжатие представлений, не ухудшая их качество. На задаче классификации изображений на CIFAR-100 MonoCon формирует представления, которые 9 раз компактнее, чем представления, полученные базовой моделью, при этом сохраняя 99% точности классификации. Для задачи определения схожести предложений на SNLI MonoCon формирует представления, которые 3,4 раза компактнее, и 1,4 раза улучшаются по метрике STS-B. Это указывает на общий потенциал MonoCon в различных задачах и доменах. ## Значимость MonoCon предлагает решение для ключевых проблем в области метрического обучения: сокращение размера представлений, повышение устойчивости и сохранение качества. Эти преимущества имеют широкое применение в различных областях, включая машинное обучение на краевых устройствах, хранение данных, поиск информации и вычисление на крупных объемах данных. Этот подход может повысить эффективность и ресурсосбережение в системах, где ограничены ресурсы или требуется высокая скорость обработки. ## Выводы MonoCon представляет собой новую модель для обучения компактных и дисэнтентных представлений, использующую функциональные ограничения. Этот подход показал высокую эффективность на различных зада

## Контекст Появление моделей предобученных на масштабных данных (pretrained models) преобразовало машинное обучение, особенно в области робастного (robust) fine-tuning (RFT). Однако существуют существенные проблемы, такие как необходимость выравнивания сложности задачи и уровня защиты от атак адверсарных примеров. Несмотря на то, что в открытом доступе доступно много не-робастных (non-robust) pretrained model, их эффективность при RFT недостаточно изучена. Это создает мотивацию для исследования условий, при которых не-робастные модели могут быть эффективно использованы в RFT. ## Метод Мы рассматриваем робастное fine-tuning (RFT), нацеленное на достижение лучшей защиты от атак адверсарных примеров, при этом сохраняя высокую точность на родной задаче (downstream task). Методология включает эксперименты с шестью предобученными моделями и пятью различными датасетами. Основной инновацией является предложение новой техники — **Epsilon-Scheduling**, которая включает в себя гибкий график сильности токсичности (perturbation strength) во время обучения. Мы также предлагаем **expected robustness**, новую метрику, которая оценивает точность и защиту модели по мере увеличения уровня атак адверсарных примеров. ## Результаты Исследования показали, что при попытке fine-tuning не-робастных моделей с целью достижения робастности происходит "откат" (suboptimal transfer), когда модель не может одновременно достичь высокой точности и высокого уровня робастности. Это эффект мы отметили на трудных задачах и с высоким уровнем шума в данных. Однако, применение **Epsilon-Scheduling** позволяет избежать этого проблемы, обеспечивая более гладкое и эффективное обучение. Метрика **expected robustness** показывает, что этот подход позволяет достичь более сбалансированной точности и защиты в разных условиях. ## Значимость Результаты этой работы имеют практическое значение для области машинного обучения, где требуется робастность и точность в различных условиях. Новая методика позволяет избегать потери эффективности при переобучении с не-робастных моделей, что улучшает их эффективность в RFT. Эти технологии могут быть применены в темах, где требуется обеспечение защиты от атак адверсарных примеров, например, в области безопасности, автоматизации и дальнейших исследований в области машинного обучения. ## Выводы Мы установили, что в Robust Fine-Tuning с не-робастных моделей может возникать "откат" в задаче фине-тюнинга, но наша новая техника **Epsilon-Scheduling** устраняет этот эффект, обеспечивая робастность и высокую точность. Мы также представили **expected robustness** как новую метрику для эффективной оценки моделей. В будущих исследованиях мы планируем применить эти методы на б

#### Контекст Глубокие нейронные сети достигли впечатляющих результатов в обработке и анализе изображений, текста, звука и других типов данных. Однако они часто сталкиваются с проблемой недостаточной семантической структуры в пространстве признаков. Например, они могут сопоставить не относящиеся друг к другу объекты, такие как "кошка" и "собака", в одном пространстве признаков, что приводит к нежелательным пересечениям между классами. Эта проблема становится важной, когда сети используются в задачах, требующих высокой точности или семантической классификации. Существуют методы, направленные на улучшение семантической структуры, но они либо требуют дополнительных параметров, либо не полностью адрессируют проблему. Наша мотивация заключается в создании рамочного подхода, который бы позволял моделям максимально эффективно использовать свои собственные выводы для улучшения семантической структуры внутреннего пространства признаков. #### Метод Мы предлагаем **Graph Consistency Regularization (GCR)**, новую фреймворк, который введет графовые структуры, полученные из выводов модели, в процесс обучения. Этот подход добавляет новый тип самопробуждения, позволяя модели очищать и повышать качество своих внутренних представлений. GCR работает путем создания **Graph Consistency Layers (GCL)** на разных уровнях сети. Эти слои строят графы семантических связей на основе выходов модели для каждого батча и выравнивают их с класс-ориентированным графом, построенным на основе классовых предсказаний. Это выравнивание гарантирует, что семантические отношения на уровне признаков отражают классовую консистентность. Чтобы улучшить эффективность, GCR включает в себя адаптивный механизм взвешивания для учитывания вклада каждого уровня в структуру. Таким образом, сеть может приоритетизировать надежные уровни представлений, отфильтровывая шумные слои. GCR является модельно-независимым, легковесным и может быть легко интегрирован в любую нейронную сеть. #### Результаты Мы проверили GCR на нескольких задачах классификации изображений, включая CIFAR-10, CIFAR-100 и ImageNet. Мы использовали различные модели, такие как ResNet и ViT, и сравнили результаты с традиционными методами. Результаты показали, что GCR улучшает семантическую структуру внутреннего пространства признаков, увеличивая коэффициент Джини и уменьшая значения intra-class distance. Эти улучшения приводят к значительному повышению качества и устойчивости прогнозов. Кроме того, мы провели эксперименты на задачах, требующих высокой семантической точности, и показали, что GCR позволяет модели лучше различать сложные классы, на

#### Контекст Federated learning (FL) представляет собой метод совместного обучения моделей машинного обучения на данных, распределенных между различными участниками, такими как больницы или клиники, без необходимости передачи или объединения индивидуальных данных. Это позволяет создавать мощные медицинские модели, обучаемые на данных из нескольких источников, сохраняя при этом конфиденциальность пациентов. Тем не менее, в реальных условиях развертывания FL в медицине возникают серьезные операционные проблемы. Эти проблемы включают выбор подходящих участников-клиентов (например, больниц), координацию между центральным сервером и клиентами, предварительную обработку клиентских данных, гармонизацию нестандартизированных данных и меток, а также выбор подходящих FL-алгоритмов на основе конкретных задач и характеристик данных. Эти операционные затруднения существенно затрудняют развертывание FL в медицинских приложениях и подчеркивают необходимость развития автоматизированных систем, способных автоматически управлять FL-рабочими процессами. #### Метод FedAgentBench представляет собой расширенную FL-фреймворк, который автоматизирует основные этапы рабочего процесса FL, включая выбор клиентов, координацию, обработку данных и выбор FL-алгоритмов. Основной идеей является создание интеллектуальных агентов, сотрудничающих между центральным сервером и клиентскими устройствами. Центральный агент выбирает подходящих участников, учитывая потребности FL-проекта, а клиентские агенты выполняют локальную обработку данных и участвуют в обучении модели. Мы разработали архитектуру, поддерживающую 40 различных FL-алгоритмов, каждый оптимизированный для решения конкретных задач в ситуациях с разной характеристикой данных. Кроме того, мы создали 201 датасетов, симулирующих рабочие среды в медицине, такие как дерматоскопия, ультразвуковые исследования, офтальмологические исследования, гистопатология, реонтген и магнитные резонансные исследования. Эти датасеты позволяют протестировать работу системы в условиях реального мира. #### Результаты Мы проводили эксперименты с 14 открытыми и 10 закрытыми текстовыми сетевыми моделями различных размеров. Наши результаты показали, что некоторые модели, такие как GPT-4.1 и DeepSeek V3, демонстрируют впечатляющие результаты в автоматизации отдельных этапов FL, в том числе выбора клиентов, обработки данных и выбора FL-алгоритмов. Однако более сложные задачи, требующие одновременного учета множества факторов (например, нестандартизированность данных и зависимости между ними), остаются сложными даже для самы

#### Контекст Графические пользовательские интерфейсы (GUI) широко распространены в современных технологиях, обеспечивая удобство взаимодействия с компьютерами и мобильными устройствами. Однако автоматизация сложных задач, взаимодействующих с GUI, остается вызовом. Визуально-языковые модели (VLM) демонстрируют перспективы в этой области, но сталкиваются с проблемами: медленные многошаговые взаимодействия с GUI во время подготовки политики и недостаточное количество качественных взаимодействий хо AGENTUI для политического обучения. Данная работа ориентирована на решение этих проблем, обеспечивая эффективность и точность в обучении агентов для GUI-систем. #### Метод Для решения указанных проблем предлагается фреймворк Decoupled Agentic RL Training (DART). Он разделяет обучение на четыре асинхронных модуля: среда выполнения, сервис подготовки траекторий, менеджер данных и тренер. Это дизайн способствует неблокирующей связи, асинхронному обучению, подготовке траекторий на уровне роллаутов и синхронизации моделей на уровне каждого рабочего процесса. Для обеспечения эффективного обучения, вводится адаптивная схема курсации данных: (1) предварительное сборение успешных траекторий для сложных задач, (2) динамическое изменение количества роллаутов и длины траекторий в зависимости от сложности задачи, (3) обучение на высокоэнтропийных шагах для концентрации на критических решениях, (4) стабилизация обучения через усеченное важностное выборка для соответствия политик. #### Результаты Исследования проводились на OSWorld-benchmark. DART-GUI-7B показал 42.13% успешность в выполнении задач, что является 14.61% абсолютного прироста по сравнению с базовой моделью и 7.34% выше SOTA открытого кода. Эти результаты свидетельствуют о значительном улучшении производительности. Более того, DART повысил GPU-потребление на 1.6, тренировочный процесс на 1.9, а эффективность среды выполнения увеличил на 5.5. #### Значимость Предлагаемый подход может быть применен в различных сценариях, где требуется автоматизация задач, взаимодействующих с GUI. Он обеспечивает высокую эффективность обучения, уменьшает время роллаута, улучшает качество решений и способствует устойчивости политик. Эти достижения открывают широкие возможности для развития систем агентного RL в области взаимодействия с GUI. #### Выводы Основные достижения: эффективное решение проблем медленных взаимодействий и недостатка качественных данных в обучении RL для GUI. Направления будущих исследований: улучшение адаптивности курсации данных, расширение DART на другие типы интерактивных систем и развитие новых методов обучения в многошаговых