Pseudo-label Induced Subspace Representation Learning for Robust Out-of-Distribution Detection
2508.03108v1
cs.LG, cs.AI
2025-08-09
Авторы:
Tarhib Al Azad, Faizul Rakib Sayem, Shahana Ibrahim
Резюме на русском
**Резюме**
Out-of-distribution (OOD) detection является ключевым аспектом создания надежных и устойчивых систем машинного обучения. Несмотря на развитие многих методов, основывающихся на особенностях признакового пространства, они часто ограничены рестриктивными предположениями, которые сужают сепарабельность между in-distribution (ID) и OOD примерами. В данной работе предлагается новый подход к OOD-детекции, основанный на псевдомаркировке субпространств (pseudo-label-induced subspace representation). Работающий под более гнущими признаками, этот метод вводит простую, но эффективную критерию обучения, которая объединяет кросс-энтропийный термин для ID-классификации и регуляризационный термин для повышения различий между ID и OOD примерами в субпространстве. Эксперименты подтверждают эффективность предложенного подхода, демонстрируя его подходящую сепарабельность и устойчивость к OOD-примерам.
Abstract
Out-of-distribution (OOD) detection lies at the heart of robust artificial
intelligence (AI), aiming to identify samples from novel distributions beyond
the training set. Recent approaches have exploited feature representations as
distinguishing signatures for OOD detection. However, most existing methods
rely on restrictive assumptions on the feature space that limit the
separability between in-distribution (ID) and OOD samples. In this work, we
propose a novel OOD detection framework based on a pseudo-label-induced
subspace representation, that works under more relaxed and natural assumptions
compared to existing feature-based techniques. In addition, we introduce a
simple yet effective learning criterion that integrates a cross-entropy-based
ID classification loss with a subspace distance-based regularization loss to
enhance ID-OOD separability. Extensive experiments validate the effectiveness
of our framework.
Ссылки и действия
Дополнительные ресурсы: