Adapting to Change: A Comparison of Continual and Transfer Learning for Modeling Building Thermal Dynamics under Concept Drifts
2508.21615v1
eess.SY, cs.LG, cs.SY
2025-09-02
Авторы:
Fabian Raisch, Max Langtry, Felix Koch, Ruchi Choudhary, Christoph Goebel, Benjamin Tischler
Резюме на русском
#### Контекст
Обеспечение энергоэффективности и комфорта в зданиях требует точного моделирования термодинамических динамик строений. Однако получение боLтoйшего объема данных для точного моделирования часто становится ограниченным из-за сложности сбора или недостатка данных в достаточном количестве. Традиционно используется метод переобучения (Transfer Learning, TL), который позволяет использовать предобученные модели для точного моделирования термодинамических динамик зданий при недостатке данных. Однако, существуют проблемы, связанные с увеличением объема данных в течение времени в результате внедрения новых систем, изменения окружающей среды или внедрения технологий, что приводит к концептуальным изменениям (concept drifts). Для этих ситуаций необходимы методы, позволяющие адаптировать модели в течение времени, чтобы оптимизировать точность прогнозирования. Настоящее исследование адресует эти проблемы, сравнивая Continual Learning (CL) и Transfer Learning (TL) стратегии для моделирования термодинамических динамик зданий в условиях concept drifts.
#### Метод
Исследование основывается на симуляционных данных, представляющих ситуации с зданиями в центральной Европе, в течение 5–7 лет. Мы использовали несколько стратегий: Transfer Learning (TL), Continual Learning (CL), включая Seasonal Memory Learning (SML), и модель, обученную с нуля. TL и SML используют предобученные модели, которые последующими этапами fine-tuning адаптируются к конкретным изменениям в динамике здания. Мы сравнивали эти методы по точности прогнозирования, эффективности вычислений и способности справляться с концептуальными изменениями. Эксперименты проводились на имитационных данных, в том числе сценариях с retrofits и изменениями окружающей среды.
#### Результаты
Результаты экспериментов показали, что SML превосходит TL и CL в точности прогнозирования в условиях concept drifts. Обученная с нуля модель показала самую низкую точность. TL показался эффективным в начальной стадии моделирования, но не справлялся с изменением термодинамических динамик в течение времени. SML показал самый стабильный результат, обеспечивая улучшение точности прогнозирования в 28.1% при отсутствии concept drifts и 34.9% при их присутствии. Этот результат достигнут без значительного увеличения вычислительных затрат.
#### Значимость
Наша исследовательская работа может быть применена в области энергоэффективности зданий, а также для мониторинга и оптимизации термодинамических динамик зданий в ходе эксплуатации. SML стабильно показал высокую точность и эффективность в адаптации к изменениям в динамике здания, что делает его привлекательным для реального применения. Кроме того, наши методы могут быть расширены для моделиро
Abstract
Transfer Learning (TL) is currently the most effective approach for modeling
building thermal dynamics when only limited data are available. TL uses a
pretrained model that is fine-tuned to a specific target building. However, it
remains unclear how to proceed after initial fine-tuning, as more operational
measurement data are collected over time. This challenge becomes even more
complex when the dynamics of the building change, for example, after a retrofit
or a change in occupancy. In Machine Learning literature, Continual Learning
(CL) methods are used to update models of changing systems. TL approaches can
also address this challenge by reusing the pretrained model at each update step
and fine-tuning it with new measurement data. A comprehensive study on how to
incorporate new measurement data over time to improve prediction accuracy and
address the challenges of concept drifts (changes in dynamics) for building
thermal dynamics is still missing.
Therefore, this study compares several CL and TL strategies, as well as a
model trained from scratch, for thermal dynamics modeling during building
operation. The methods are evaluated using 5--7 years of simulated data
representative of single-family houses in Central Europe, including scenarios
with concept drifts from retrofits and changes in occupancy. We propose a CL
strategy (Seasonal Memory Learning) that provides greater accuracy improvements
than existing CL and TL methods, while maintaining low computational effort.
SML outperformed the benchmark of initial fine-tuning by 28.1\% without concept
drifts and 34.9\% with concept drifts.
Ссылки и действия
Дополнительные ресурсы: