MORE-CLEAR: Multimodal Offline Reinforcement learning for Clinical notes Leveraged Enhanced State Representation

## Контекст Sepsis, жизненноопасная воспалительная реакция на инфекцию, может привести к осложнениям и органовому недостатку, что делает критически важной проработку эффективных стратегий ее детектирования и лечения. Основные проблемы в этой области заключаются в затруднениях с получением полной картины пациентского состояния, в ограниченности существующих методов в том, что они опираются лишь на структурированные данные, такие как лабораторные исследования и клинические показатели. Более того, недостаточное использование неструктурированных клинических заметок, которые могут содержать важные сведения о состоянии пациента, является одной из основных узких мест. Это способствует появлению моделей, не в состоянии эффективно рассмотреть контекст в составе своих решений. Наша мотивация заключается в разработке подхода, который бы включил всестороннюю информацию из клинических заметок, улучшил представление статуса пациента и способствовал более точному диагностированию и лечению сепсиса. ## Метод Для решения данных проблем мы предлагаем MORE-CLEAR (Multimodal Offline Reinforcement learning for Clinical notes Leveraged Enhanced State Representation), многомодальный подход к офлайн-реинфорсменту с использованием крупномасштабных языковых моделей (LLMs). Эта модель обращается к неструктурированным клиническим заметкам, используя предварительно обученные модели языкового моделирования для извлечения разнородных клинических признаков. Архитектура MORE-CLEAR включает в себя гибкий механизм управления весами, основанный на gated fusion и cross-modal attention, которые позволяют эффективно объединять информацию из различных модальностей в зависимости от временных характеристик. Это позволяет улучшить представление состояния пациента, которое, в свою очередь, способствует более точному определению возможных действий. ## Результаты Мы провели тщательные эксперименты, используя данные из двух открытых (MIMIC-III и MIMIC-IV) и одного частного наборов данных. Результаты показали, что MORE-CLEAR сокращает ошибки оценки временных рядов и улучшает показатели политики управления сепсисом в сравнении с моделями, основанными только на структурированных данных. Например, оценка ожидаемого времени ожидания в МИМИК-III показала значительное увеличение выживаемости, что говорит о том, что MORE-CLEAR действительно улучшает понимание состояния пациента и позволяет сделать более точные рекомендации. ## Значимость MORE-CLEAR открывает новые горизонты в области офлайн-реинфорсментного управления клиническими процессами. Он может быть применен не только к сепсису, но и к другим жизненно опасным ситуациям в медицинской практике. Из-за своей