Disentangling Content from Style to Overcome Shortcut Learning: A Hybrid Generative-Discriminative Learning Framework

#### Контекст Самоорганизующее обучение (Self-Supervised Learning, SSL) является одной из самых перспективных областей машинного обучения, позволяя получить высококачественные представления данных без полностью отмеченных данных. Однако, несмотря на свои достижения, SSL сталкивается с систематической проблемой, известной как **Shortcut Learning** (суперфициальное обучение). Модели SSL часто выучивают нерелевантные или локальные признаки, такие как текстура изображения, вместо глобальной структуры, что приводит к уязвимости моделей к нарушениям во время оценки, особенно на неизвестных доменах. Эта проблема видна как в генеративных подходах (например, в Masked Autoencoders, MAE), так и в дискриминативных. Мы проанализировали этот аспект и показали, что существующие подходы, направленные на выравнивание или разделение признаков, не устраняют проблему глубинной зависимости моделей от суперфициальных признаков. Наша цель — разработать фреймворк, который устранит возникновение суперфициальных признаков уже на этапе обучения, обеспечив надёжные и универсально применяемые представления. #### Метод Мы предлагаем **Hybrid Generative-Discriminative Learning (HyGDL)** — рамочный подход, который решает проблему Shortcut Learning путём явного разделения контента от стиля в представлениях. Центральным идеей является **Invariance Pre-training Principle**, при котором модель обучается находить неизменный элемент (контент), независимо от изменения стилевых признаков (например, цвета или текстура). Мы аналитически определяем стиль как компонент представления, которая находится вне контентной основы, используя векторное проецирование. Фреймворк HyGDL состоит из трёх основных компонентов: 1. **Self-Distillation Objective**: это задача воспроизведения, направленная на установление стильно-независимого контентного направления. 2. **Analytical Projection**: в этой стадии мы аналитически разделяем представление модели на контент и стиль, используя векторное проецирование. 3. **Style-Conditioned Reconstruction Objective**: эта задача восстанавливает исходное изображение, используя разделённые контент и стиль, что обеспечивает полную гиперсупервизорную связь. В отличие от предыдущих методов, HyGDL не опирается на неявные гипотезы или настройки — его дискриминативно-генеративная структура гарантирует явное исключение суперфициальных признаков. #### Результаты Мы проверили HyGDL на специально сконструированных наборах данных, ориентированных на обнаружение суперфициальных признаков. Модель показала значительное превосходство по сравнению с традиционными подходами. Например, HyGDL показал улучшение точности в 15% в задачах, где модели SSL обычно страдают от влияния суперфициальных признаков. Также мы проверили наши представления на реальных данных и замет