## Контекст Современные методы персонализированного здравоохранения сталкиваются с рядовыми проблемами, в том числе недостаточной точностью, ограниченностью в адаптации к индивидуальным особенностям пользователей и недостаточным доверием к источникам данных. Эти проблемы становятся критичными в сфере здорового образа жизни, где точный анализ данных и ориентированность на пользователя могут означать значительное улучшение качества жизни и эффективности терапии. Необходима разработка систем, которые могут эффективно обрабатывать большие объемы данных, используя ИИ для предсказания и адаптации рекомендаций в реальном времени. ## Метод SePA (Search-enhanced Predictive AI Agent) — это система персонализированного здорового образа жизни, которая использует глубокое обучение для предсказания дневных показателей, таких как стресс, боль и риск повреждений. Основной методологией является комбинация **персонализированного машинного обучения** и **реконструкции на основе восстановления**. Индивидуальные модели предсказывают данные пользователя, используя данные из портативных устройств. Для обеспечения надежности и контекстуальной релевантности генерируемой системой информации, был реализован модуль восстановления, который использует специализированные источники для обоснования рекомендаций. Эта архитектура обеспечивает высокую точность и удобство использования. ## Результаты В экспериментах, проведенных на данных 28 пользователей (1260 данных точек), модели SePA показали значительное превосходство перед общими моделями обучения. Эксперименты включали **rolling-origin cross-validation** и **group k-fold cross-validation**, подтвердив высокую точность предсказания. В пилотном исследовании с участием экспертов (n=4) было продемонстрировано, что информация, полученная с помощью модуля восстановления, является более убедительной и достоверной по сравнению с нереконструированной версией. Это подтверждает практическую значимость системы. ## Значимость SePA может быть применена в здравоохранении, персонализированном здоровом образе жизни и фитнесе. Она предоставляет достоверные, адаптивные рекомендации, которые могут повысить качество жизни и помочь в предупреждении развития заболеваний. Основное преимущество — в сочетании машинного обучения с доверительными источниками информации, что обеспечивает надежность рекомендаций. Это может привести к новым возможностям в области здоровья и биоинформатики. ## Выводы Разработанная система SePA продемонстрировала свою эффективность в предсказании индивидуальных показателей здоровья. Основным результатом является то, что модели, ориентированные на поль

#### Контекст Применение технологий генерирующих текст в области многократного общения с большими лингвистическими моделями (LLM) позволяет решить многие задачи в области обмена информацией, управления задачами и поиска решений. Однако, при увеличении трудности и продолжительности таких диалогов становится сложнее пользователям отслеживать и контролировать прогресс решения задач. Это может привести к ошибкам, путанице и потере времени. Необходима система, которая помогала бы пользователям отслеживать прогресс и корректировать стратегии общения с моделью. #### Метод На основе библиотеки коммуникации с LLM разработана интерфейсная система OnGoal, которая использует методы глубокого обучения для предоставления реального времени оценок степени соответствия пользовательских задач и решений модели. Интерфейс включает в себя функции, такие как реальное время визуализация прогресса, точные оценки прогресса по целям пользователя, а так же подробные объяснения результатов с примерами из диалога. Данная система также позволяет пользователю отслеживать изменения в стратегии общения в течение всего диалога. #### Результаты Проведенные эксперименты с 20 участниками показали, что использование OnGoal при построении диалога с LLM существенно сокращает время и усилия, необходимые для достижения целей. Участники, использовавшие OnGoal, демонстрировали более эффективные стратегии общения, такие как уточнение вводных данных и изменение темы диалога для устранения непонятностей. Эти результаты подтверждают, что поддержка целей в диалоге может улучшить эффективность и удовлетворение пользователей. #### Значимость OnGoal может применяться в различных сферах, включая обучение, консультации и управление проектами, где пользователи работают с LLM для достижения конкретных целей. Он уменьшает когнитивный нагрузку пользователей, улучшает взаимодействие и позволяет добиваться более точных результатов. Это может улучшить общую эффективность диалога с моделями и увеличить удовлетворение пользователей. #### Выводы Результаты исследования показали, что OnGoal значительно улучшает работу с LLM в многократных диалогах, помогая пользователям поддерживать прогресс в задачах и стратегии общения. Будущие исследования будут сфокусированы на расширении функционала интерактивности и повышении точности оценок прогресса. Эти направления могут привести к более широкому применению технологий LLM в профессиональных и образовательных сферах.

## Контекст Калибровка в машинном обучении широко используется для повышения надежности и доверия к классификаторам. Однако многие из исследований, посвященных этой теме, фокусировались на технических аспектах калибровки, оставив недостаточно исследованым вопрос о том, насколько калибровка влияет на поведение неэкспертных пользователей, которые полагаются на модели для принятия решений. В нашем исследовании мы рассматриваем этот аспект, оценивая влияние калибровки на уровень доверия к модели и на соответствие решений пользователей рекомендациям модели. Мы используем Human-Computer-Interaction (HCI) эксперимент, чтобы изучить эти вопросы и предлагаем дополнительный подход к калибровке, основанный на теории прогнозов (prospect theory) из теории экономического поведения. ## Метод Мы проводим эксперимент с участием неэкспертных пользователей, которые принимают решения на основе предсказаний модели, калиброванной и некалиброванной. В эксперименте участники получают задачи, в которых им необходимо выбирать оптимальные действия на основе прогнозов модели. Мы измеряем (i) уровень доверия к модели, (ii) корреляцию между решениями пользователей и предсказаниями модели, и (iii) на субъективное достоверность предсказаний. Для изучения влияния прогнозов на решения мы предлагаем стратегию, основанную на Kahneman-Tversky prospect theory, и изучаем, как она влияет на доверие и логику принятия решений. ## Результаты Наши экспериментальные результаты показывают, что калибровка в изолированном виде недостаточна для повышения доверия к модели. Хотя калибровка увеличивает корреляцию между решениями пользователей и модельными предсказаниями, этот эффект не влечет за собой увеличение уровня доверия к модели. Это может быть объяснено тем, что участники эксперимента не всегда понимают или не учитывают характеристики модели в своих решениях. Однако коррекция по prospect theory приводит к значительному повышению корреляции решений с предсказаниями, что добирает доверие к модели. Тем не менее, тесты показывают, что уровень доверия не зависит от того, какая коррекция используется. ## Значимость Наши результаты указывают на критическую роль коррекций, основанных на прогнозах, для улучшения соответствия решений пользователей машинным предсказаниям. Эти результаты могут быть применены в сферах, где необходимо улучшить взаимодействие пользователей с машинными системами, таких как роботы, диагностика, финансы или транспорт. Благодаря повышению корреляции решений с модельными предсказаниями, модели становятся более эффективными в помощи пользователям при различных задачах. Наш подход также подчеркивает важность рассмотрения поведенческих факторов при разработке и калибровке

---------------------------------------------------- ## Контекст ---------------------------------------------------- Дизайнеры часто сталкиваются с проблемой оптимизации проектов, который требует учета множества зависимых параметров и ограничений. Оптимальная организация дизайн-процесса позволяет повысить качество результатов, но часто требует многократных циклов итеративного тестирования и творческой экспериментации. Этот процесс требует больших затрат времени и усилий, так как дизайнеры должны руководствоваться не только техническими параметрами, но и своим восприятием и потребностями пользователей. Существуют системы, основанные на методах оптимизации, например, Bayesian Optimization, которые могут рекомендовать дизайнеру, какие параметры нужно изменить, чтобы повысить оптимальность решения. Однако эти системы не включают дизайнера в процесс оптимизации и не предоставляют возможность человеческого вмешательства. Это ограничивает возможность дизайнера оценить решение на этапе его формирования, что влияет на его продуктивность и счастье от процесса создания. ## Метод ---------------------------------------------------- Мы предлагаем фреймворк для кооперативного дизайна оптимизации, который интегрирует методы систем-лидирующей оптимизации с технологией Large Language Models (LLMs). Это позволяет обеспечить более естественный интерактивный процесс, где дизайнер может взаимодействовать с системой через естественный язык, а не только получать рекомендации. Методология основывается на следующих этапах: 1. **Интеллектуальная модель оптимизации**: мы используем LLM для понимания естественного языка и формирования оптимальных запросов к системе оптимизации. 2. **Системоориентированная оптимизация**: методы, такие как Bayesian Optimization, определяют оптимальные параметры в высоком измерительном пространстве. 3. **Интерактивная кооперация**: дизайнер может взаимодействовать с системой в течение процесса, внося изменения или получая рекомендации в человеческом языке. 4. **Оценка результатов**: мы проводим эксперименты, чтобы сравнить нашу методику с другими подходами по оптимальности, удобству и эффективности. ## Результаты ---------------------------------------------------- Эксперименты проводились на реальных данных и визуальных задачах дизайна. Мы сравнили нашу методику с системой-лидером и ручным дизайном. Наши результаты показали, что: - **Пользовательский вмешательство**: наш фреймворк дает более высокую степень управления, чем система-лидера, позволяя дизайнеру точнее адаптировать решение под свои потребности. - **Показатели оптимизации**: метод нашего фреймворка показал повышенную эффективность в сравнении с ручным дизайном и сочетал более низкий уровень затрат усилий в сравнении с существующим кооперативным методом.

## Контекст Область исследования Explainable AI (XAI) в креативных контекстах фокусируется на создании моделей, которые не только являются черными ящиками, но также интерактивными инструментами, позволяющими участию в процессе творчества. Известно, что существующие крупные текстово-картинные модели, такие как текст-к-изображению диффузионные модели, часто трудно понять и корректировать из-за их сложности и автоматизма. Это ограничивает возможности художников для изменения и управления процессом генерирования изображений. Однако именно эта возможность модификации является ключевой для поддержки творческой практики. В нашем исследовании мы рассматриваем возможности, которые могут быть сделаны доступными через транспарентность моделей и их модификацию, чтобы позволить художникам взаимодействовать с моделью на более глубоком уровне. Наша мотивация заключается в том, чтобы создать подход, который бы стал более творческим, гибким и доступным творческим профессионалам. ## Метод Мы предлагаем "craft-based approach to explainability", который вдохновлен методом "reflection-in-action" Р. Шона. Этот подход предполагает не только разобрать модель, но и взаимодействовать с ее внутренними компонентами в течение долгого периода времени, изменяя их и изучая результаты. Мы реализовали это в виде плагина для системы ComfyUI, которая представляет собой node-based interface, позволяющий манипулировать различными частями генерирующей модели. Мы использовали различные данные, включая обучающие данные модели, для исследования того, как модификации различных узлов влияют на генерируемые изображения. Данный подход дает художникам возможность "изменять" модель в реальном времени, чтобы более ясно понять, как генерируются результаты. ## Результаты Мы провели эксперименты, в которых художники взаимодействовали с моделью, изменяя разные узлы и изучая их влияние на генерируемые изображения. Наши результаты показали, что художники стали более контролируемыми в процессе генерирования, и они могли быстрее узнавать, как различные части модели влияют на итоговый результат. Мы также обнаружили, что модификация узлов модели может привести к изменению стиля, темы и даже того, что генерируется вообще, что дает художникам большую гибкость в своей работе. ## Значимость Мы убедились, что предлагаемый подход может быть использован в творческих процессах, таких как графическое дизайн, 3D-моделирование, и даже видеосъемка. Мы видим, что такой подход может сделать модели более доступными для художников, улучшить их контроль над процессом генерирования и возможность для творческого эксперимен

## Контекст Улучшение эмоционального распознавания с использованием мультимодальных физиологических сигналов является актуальной проблемой в области компьютерных интерфейсов мозга. Тем не менее, эти сигналы часто являются высокомерночисленными и могут содержать нерелевантные, повторяющиеся и шумные представления. Такая неочищенная информация легко приводит к переобучению, повышению комплексности обработки и снижению качества распознавания эмоций. Особенно остро эта проблема проявляется при отсутствии данных в некоторых режимах измерений, что часто встречается в реальных условиях. Для решения этих задач развито многочисленное фильтрование признаков. Однако большинство существующих подходов предполагают полноту данных, что не соответствует реальной ситуации. Для улучшения эмоционального распознавания в условиях отсутствия данных необходимо разработать эффективные методы обучения и выделения признаков. ## Метод Метод **Adaptive Shared Latent Structure Learning (ASLSL)** предлагает инновационный подход к обработке неполных мультимодальных физиологических сигналов. Он основывается на предположении, что признаки, имеющие близкие эмоциональные метки, делятся общим скрытым пространством. Метод ASLSL использует адаптивную структуру обучения для извлечения этого общего пространства, что позволяет уменьшить влияние отсутствия данных и выделить наиболее значимые эмоциональные признаки. Данный подход эффективно компенсирует отсутствие или повреждение данных в отдельных модальностях, обеспечивая более точное и высококачественное распознавание эмоций. ## Результаты Авторы провестили эксперименты на двух популярных датасетах (DEAP и DREAMER), которые включают мультимодальные физиологические данные и многомерные метки эмоций. На них сравнивались результаты метода ASLSL с 17 других методов выделения признаков. Экспериментальные результаты показали, что ASLSL демонстрирует превосходство в точности классификации и эффективности в обработке неполных данных. Особенно заметны выигрыши при отсутствии данных в некоторых модальностях, где прочие методы часто снижают качество распознавания. ## Значимость Предложенный подход может быть применен в различных областях, включая компьютерные интерфейсы мозга, медицинскую диагностику и учет важных эмоциональных состояний в ИИ-системах. Он обеспечивает улучшенную точность распознавания эмоций, уменьшает шум и нерелевантную информацию, и значительно сокращает вычислительную сложность. Это делает метод ASLSL незаменимым для приложений, требующих высокого качества распознавания в неполных данных. ## Выводы Метод ASLSL демонстрирует высокую эф