Exploring Pre-training Across Domains for Few-Shot Surgical Skill Assessment

## Контекст Оценка технических навыков в хирургии (surgical skill assessment, SSA) является ключевым заданием в сфере компьютерного зрения для хирургических применений. Однако существуют серьезные сложности в ее реализации, включая недостаток аннотированных данных для обучения моделей. Эти аннотации требуют времени и экспертного согласования, что делает их получение дорогостоящим и трудоемким процессом. Несмотря на то, что методы few-shot learning (FSL) предлагают альтернативу, своевременное развитие этих моделей требует эффективного предварительного обучения (pre-training). Хотя pre-training был изучен для многих субжективных задач в сфере хирургии, его применение в контексте SSA остается мало исследовано. В данной работе мы исследуем, как различные предварительные стратегии обучения влияют на результаты неполностью супервизированного обучения для SSA. ## Метод Мы формулируем задачу SSA в рамках few-shot learning и исследуем, как различные стратегии предварительного обучения влияют на получение результатов в такой ситуации. Для этого мы используем общедоступный датасет роботизированных хирургических операций и аннотируем его с помощью системы OSATS (Objective Structured Assessment of Technical Skill). Мы исследуем влияние различных источников предварительного обучения, включая внутренние (роботизированные хирургические операции) и внешние (различные невидеоматериалы), на результаты модели в few-shot сценариях с разным числом сэмплов. Мы также изучаем влияние размера и доменного аналогичности источников предварительного обучения на качество переноса (transferability). ## Результаты Мы выполнили эксперименты с предварительным обучением на различных датасетах и оценили его влияние на результаты в few-shot обучении для SSA. Мы сравнили результаты моделей, обученных на внутренних (роботизированных хирургических операций) и внешних (невидеоматериалах) датасетах с разным уровнем доменного аналогичности. Наши результаты показали, что даже небольшие, но доменно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно датасеты могут превосходить более крупные, но менее относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относительно относи