CD-TVD: Contrastive Diffusion for 3D Super-Resolution with Scarce High-Resolution Time-Varying Data
2508.08173v1
cs.CV, eess.IV
2025-08-13
Авторы:
Chongke Bi, Xin Gao, Jiangkang Deng, Guan
Резюме на русском
## Контекст
Область исследования связана с развитием методов для повышения разрешения временно варьирующихся трехмерных данных, которые требуют огромных вычислительных ресурсов для получения с высокой частотой кадров. Это важно для таких областей как метеорология, гидродинамика и других научных симуляций, где генерация таких данных является дорогостоящей и требующей много времени. Ограниченность доступных высокого разрешения данных (HR) приводит к нехватке тренировочных данных для обучения существующих моделей супер-разрешения, что ограничивает их применение. Мотивация заключается в создании метода, который может эффективно работать с ограниченным количеством высокого разрешения данных, позволяя при этом получить точные и детальные 3D супер-разрешенные результаты.
## Метод
Метод CD-TVD (Contrastive Diffusion for 3D Super-Resolution) сочетает две основные компоненты: контрастное обучение и усовершенствованную модель диффузии. За счёт контрастного обучения на исторических данных модель учится распознавать общие характеристики и детали высокого разрешения (HR) и низкого разрешения (LR) данных. В ходе тренировки, модель диффузии, укомплектованная локальным механизмом внимания, подстраивается под новые данные с помощью только одного нового шага высокого разрешения, который становится доступным. Это позволяет ограничиться минимальным количеством высокого разрешения данных, при этом учитывая уже доступный шум и детали с помощью ранее полученных знаний. Таким образом, CD-TVD эффективно преобразует ограниченные высокорезольвентные данные в HR-результаты.
## Результаты
Использовались данные из симуляций жидкости и атмосферных процессов. Модель CD-TVD была сравнивана с другими методами супер-разрешения. Результаты показали, что CD-TVD достигает высокой точности в предсказании временно варьирующихся трехмерных данных с 3D супер-разрешением, при этом значительно экономящей ресурсы. Она показала себя эффективнее существующих моделей, особенно при ограниченных тренировочных данных. Эксперименты подтвердили, что модель CD-TVD может точно восстанавливать детали временно варьирующихся трехмерных данных, даже в условиях ограниченности высокоразрешенных данных.
## Значимость
Метод CD-TVD может быть применён в ситуациях, где доступ к большим объёмам высокого разрешения данных ограничен, например, в научных симуляциях, в технике, в аэрокосмических исследованиях. Он предлагает значительные преимущества в своей способности использовать ограниченные HR-данные для получения точных 3D супер-разрешенных результатов. Это открывает возможности для экономии времени и вычислительных ресурсов. Также, CD
Abstract
Large-scale scientific simulations require significant resources to generate
high-resolution time-varying data (TVD). While super-resolution is an efficient
post-processing strategy to reduce costs, existing methods rely on a large
amount of HR training data, limiting their applicability to diverse simulation
scenarios. To address this constraint, we proposed CD-TVD, a novel framework
that combines contrastive learning and an improved diffusion-based
super-resolution model to achieve accurate 3D super-resolution from limited
time-step high-resolution data. During pre-training on historical simulation
data, the contrastive encoder and diffusion superresolution modules learn
degradation patterns and detailed features of high-resolution and
low-resolution samples. In the training phase, the improved diffusion model
with a local attention mechanism is fine-tuned using only one newly generated
high-resolution timestep, leveraging the degradation knowledge learned by the
encoder. This design minimizes the reliance on large-scale high-resolution
datasets while maintaining the capability to recover fine-grained details.
Experimental results on fluid and atmospheric simulation datasets confirm that
CD-TVD delivers accurate and resource-efficient 3D super-resolution, marking a
significant advancement in data augmentation for large-scale scientific
simulations. The code is available at
https://github.com/Xin-Gao-private/CD-TVD.
Ссылки и действия
Дополнительные ресурсы: