CD-TVD: Contrastive Diffusion for 3D Super-Resolution with Scarce High-Resolution Time-Varying Data

2508.08173v1 cs.CV, eess.IV 2025-08-13
Авторы:

Chongke Bi, Xin Gao, Jiangkang Deng, Guan

Резюме на русском

## Контекст Область исследования связана с развитием методов для повышения разрешения временно варьирующихся трехмерных данных, которые требуют огромных вычислительных ресурсов для получения с высокой частотой кадров. Это важно для таких областей как метеорология, гидродинамика и других научных симуляций, где генерация таких данных является дорогостоящей и требующей много времени. Ограниченность доступных высокого разрешения данных (HR) приводит к нехватке тренировочных данных для обучения существующих моделей супер-разрешения, что ограничивает их применение. Мотивация заключается в создании метода, который может эффективно работать с ограниченным количеством высокого разрешения данных, позволяя при этом получить точные и детальные 3D супер-разрешенные результаты. ## Метод Метод CD-TVD (Contrastive Diffusion for 3D Super-Resolution) сочетает две основные компоненты: контрастное обучение и усовершенствованную модель диффузии. За счёт контрастного обучения на исторических данных модель учится распознавать общие характеристики и детали высокого разрешения (HR) и низкого разрешения (LR) данных. В ходе тренировки, модель диффузии, укомплектованная локальным механизмом внимания, подстраивается под новые данные с помощью только одного нового шага высокого разрешения, который становится доступным. Это позволяет ограничиться минимальным количеством высокого разрешения данных, при этом учитывая уже доступный шум и детали с помощью ранее полученных знаний. Таким образом, CD-TVD эффективно преобразует ограниченные высокорезольвентные данные в HR-результаты. ## Результаты Использовались данные из симуляций жидкости и атмосферных процессов. Модель CD-TVD была сравнивана с другими методами супер-разрешения. Результаты показали, что CD-TVD достигает высокой точности в предсказании временно варьирующихся трехмерных данных с 3D супер-разрешением, при этом значительно экономящей ресурсы. Она показала себя эффективнее существующих моделей, особенно при ограниченных тренировочных данных. Эксперименты подтвердили, что модель CD-TVD может точно восстанавливать детали временно варьирующихся трехмерных данных, даже в условиях ограниченности высокоразрешенных данных. ## Значимость Метод CD-TVD может быть применён в ситуациях, где доступ к большим объёмам высокого разрешения данных ограничен, например, в научных симуляциях, в технике, в аэрокосмических исследованиях. Он предлагает значительные преимущества в своей способности использовать ограниченные HR-данные для получения точных 3D супер-разрешенных результатов. Это открывает возможности для экономии времени и вычислительных ресурсов. Также, CD

Abstract

Large-scale scientific simulations require significant resources to generate high-resolution time-varying data (TVD). While super-resolution is an efficient post-processing strategy to reduce costs, existing methods rely on a large amount of HR training data, limiting their applicability to diverse simulation scenarios. To address this constraint, we proposed CD-TVD, a novel framework that combines contrastive learning and an improved diffusion-based super-resolution model to achieve accurate 3D super-resolution from limited time-step high-resolution data. During pre-training on historical simulation data, the contrastive encoder and diffusion superresolution modules learn degradation patterns and detailed features of high-resolution and low-resolution samples. In the training phase, the improved diffusion model with a local attention mechanism is fine-tuned using only one newly generated high-resolution timestep, leveraging the degradation knowledge learned by the encoder. This design minimizes the reliance on large-scale high-resolution datasets while maintaining the capability to recover fine-grained details. Experimental results on fluid and atmospheric simulation datasets confirm that CD-TVD delivers accurate and resource-efficient 3D super-resolution, marking a significant advancement in data augmentation for large-scale scientific simulations. The code is available at https://github.com/Xin-Gao-private/CD-TVD.

Ссылки и действия