Pseudo-label Induced Subspace Representation Learning for Robust Out-of-Distribution Detection

2508.03108v1 cs.LG, cs.AI 2025-08-09
Авторы:

Tarhib Al Azad, Faizul Rakib Sayem, Shahana Ibrahim

Резюме на русском

**Резюме** Out-of-distribution (OOD) detection является ключевым аспектом создания надежных и устойчивых систем машинного обучения. Несмотря на развитие многих методов, основывающихся на особенностях признакового пространства, они часто ограничены рестриктивными предположениями, которые сужают сепарабельность между in-distribution (ID) и OOD примерами. В данной работе предлагается новый подход к OOD-детекции, основанный на псевдомаркировке субпространств (pseudo-label-induced subspace representation). Работающий под более гнущими признаками, этот метод вводит простую, но эффективную критерию обучения, которая объединяет кросс-энтропийный термин для ID-классификации и регуляризационный термин для повышения различий между ID и OOD примерами в субпространстве. Эксперименты подтверждают эффективность предложенного подхода, демонстрируя его подходящую сепарабельность и устойчивость к OOD-примерам.

Abstract

Out-of-distribution (OOD) detection lies at the heart of robust artificial intelligence (AI), aiming to identify samples from novel distributions beyond the training set. Recent approaches have exploited feature representations as distinguishing signatures for OOD detection. However, most existing methods rely on restrictive assumptions on the feature space that limit the separability between in-distribution (ID) and OOD samples. In this work, we propose a novel OOD detection framework based on a pseudo-label-induced subspace representation, that works under more relaxed and natural assumptions compared to existing feature-based techniques. In addition, we introduce a simple yet effective learning criterion that integrates a cross-entropy-based ID classification loss with a subspace distance-based regularization loss to enhance ID-OOD separability. Extensive experiments validate the effectiveness of our framework.

Ссылки и действия