DINOMotion: advanced robust tissue motion tracking with DINOv2 in 2D-Cine MRI-guided radiotherapy
2508.10260v1
eess.IV, cs.AI, cs.CV
2025-08-15
Авторы:
Soorena Salari, Catherine Spino, Laurie-Anne Pharand, Fabienne Lathuiliere, Hassan Rivaz, Silvain Beriault, Yiming Xiao
Резюме на русском
#### Контекст
В области 2D-Cine MRI-guided radiotherapy, точное трекеринге мозгового движения является критически важной задачей для обеспечения качественных результатов лечения и максимальной безопасности. Несмотря на развитие методов регистрации последовательных изображений, существующие подходы часто сталкиваются с проблемами, такими как большие несоответствия и недостаточность интерпретируемости результатов. Эти ограничения могут привести к неточному определению активных зон и, как следствие, к неэффективности терапии. Наша мотивация заключается в разработке системы, которая не только обеспечит точность, но и повысит транспарентность процесса трекеринга движения.
#### Метод
Мы предлагаем DINOMotion — новую систему на основе DINOv2 с использованием Low-Rank Adaptation (LoRA) для улучшения процесса трекеринга. Основной инновацией является использование LoRA, что позволяет сократить количество параметров, обучаемых моделью, увеличив ее эффективность. DINOv2, в свою очередь, обеспечивает мощные механизмы выделения фич и значительную устойчивость к большим несоответствиям в последовательных изображениях. Наша система не требует итеративного оптимизационного процесса; она динамически вычисляет регистрацию в реальном времени. Это позволяет значительно сократить время обработки и обеспечить высокую производительность.
#### Результаты
Мы провели эксперименты на двух типах данных: данных с волонтеров и пациентов. DINOMotion показала высокую точность в оценке линейных и нелинейных преобразований движения. Для жировой железы, кишечника и легких были получены Dice-оценки 92.07%, 90.90% и 95.23% соответственно. Для этих регионов также были оценены Hausdorff-расстояния — 5.47 мм, 8.31 мм и 6.72 мм. Эти результаты показали превосходство системы над другими существующими методами, особенно при трекеринге больших несоответствий. Мы также измерили время работы системы, которое составляет приблизительно 30 мс для каждого скана, что делает DINOMotion подходящим для реального времени.
#### Значимость
Наша система предлагает значительные преимущества для реального времени трекеринга движения в 2D-Cine MRI-guided radiotherapy. Она обеспечивает интерпретируемость результатов, точность высокой степени и высокую производительность. Такие характеристики позволяют значительно улучшить точность и безопасность терапии, а также увеличить скорость и эффективность работы медицинских специалистов. Мы планируем расширить применение DINOMotion на различные медицинские задачи, в том числе для других видов имплантов и трекеринга движения в реальном времени.
#### Вывод
Abstract
Accurate tissue motion tracking is critical to ensure treatment outcome and
safety in 2D-Cine MRI-guided radiotherapy. This is typically achieved by
registration of sequential images, but existing methods often face challenges
with large misalignments and lack of interpretability. In this paper, we
introduce DINOMotion, a novel deep learning framework based on DINOv2 with
Low-Rank Adaptation (LoRA) layers for robust, efficient, and interpretable
motion tracking. DINOMotion automatically detects corresponding landmarks to
derive optimal image registration, enhancing interpretability by providing
explicit visual correspondences between sequential images. The integration of
LoRA layers reduces trainable parameters, improving training efficiency, while
DINOv2's powerful feature representations offer robustness against large
misalignments. Unlike iterative optimization-based methods, DINOMotion directly
computes image registration at test time. Our experiments on volunteer and
patient datasets demonstrate its effectiveness in estimating both linear and
nonlinear transformations, achieving Dice scores of 92.07% for the kidney,
90.90% for the liver, and 95.23% for the lung, with corresponding Hausdorff
distances of 5.47 mm, 8.31 mm, and 6.72 mm, respectively. DINOMotion processes
each scan in approximately 30ms and consistently outperforms state-of-the-art
methods, particularly in handling large misalignments. These results highlight
its potential as a robust and interpretable solution for real-time motion
tracking in 2D-Cine MRI-guided radiotherapy.
Ссылки и действия
Дополнительные ресурсы: