Fleming-R1: Toward Expert-Level Medical Reasoning via Reinforcement Learning

#### Контекст Область применения ИИ в медицине набирает обороты, но достижение экспертного уровня клинического разума остается вызовом. Обычно, л LLM могут обеспечить точные ответы, но часто не предоставляют транспарентных выводов, необходимых для проверки и надежности. Это недостаток становится критическим в высокорисковых сферах, где необходимо не только правильность ответов, но и прозрачность логики. Fleming-R1 разработан как решение этой проблемы, стремясь к экспертному клиническому разуму с помощью трех основных инноваций. #### Метод Fleming-R1 использует три основных техники. **Reasoning-Oriented Data Strategy (RODS)** проводит синтез данных с использованием знаний из графов и куратируемых медицинских обучающих данных, чтобы улучшить покрытие на проблемы, относящиеся к редким болезням, лекарству и многоходовым выводам. **Chain-of-Thought (CoT) cold start** делает использование готовых выводов методом Knowledge Distillation от моделей-учителей, чтобы установить нормы для разума. **Two-stage Reinforcement Learning from Verifiable Rewards (RLVR)**, включая Group Relative Policy Optimization, нацелен на поддержание основных клинических логических умений и устранение постоянных недостатков через адаптивное добавление сложных примеров. #### Результаты Эксперименты показали, что Fleming-R1 демонстрирует выдающиеся результаты по сравнению с базовыми моделями. Версия 7B Fleming-R1 превзошла модели большего размера на нескольких медицинских задачах, в то время как 32B модель достигла сопоставимого уровня с GPT-4o и постоянно превосходила открытые аналоги. Эти результаты показывают, что структурированные подходы к данным, начальная инициализация для разума и учетная логика могут быть послужить основой для получения экспертного клинического разума, превосходящего простую точность. #### Значимость Fleming-R1 может применяться в различных областях, в том числе диагностике, клинической терапии и медицинском анализе. Он предоставляет повышенную прозрачность и надежность, что может повысить безопасность при использовании в клинических средах. Это демонстрирует перспективу ИИ в медицине, где надежность и прозрачность критически важны. #### Выводы Результаты Fleming-R1 свидетельствуют о значимости структурированных подходов к обучению, начальной инициализации для разума и логических методов доказательства. Будущие исследования будут направлены на улучшение моделей клинического разума, увеличение прозрачности и эффективности, а также расширение применения в реальных клинических ситуациях.