Learning with Confidence

2508.11037v1 cs.LG, cs.AI, math.DG 2025-08-19
Авторы:

Oliver Ethan Richardson

Резюме на русском

## Контекст Область исследования связана с теорией обучения и моделирования учения в системах автоматической обработки информации. Обучение в этих системах подразумевает изменение белемерных систем в ответ на информационные входы. Одной из ключевых проблем является определение уровня доверия к полученной информации и ее влиянию на изменение белемерного состояния. Это определяет мотивацию для разработки методов, которые могут эффективно описывать и оценивать уровень доверия, чтобы улучшить процесс обучения и понимания влияния информации на результаты. ## Метод Методология основывается на аксиоматической определении понятия "учения с уверенностью" (learning with confidence). Данное понятие описывается как мера доверия к входной информации и ее воздействию на модель учения. Для измерения уверенности разработаны два продолжительностных подхода: первый основан на векторных полях, второй — на оценках потерь. Оба подхода базируются на формальных моделях, разрешающих представление уверенности в универсальной форме. Далее, для эффективного обучения рассмотрены технологии, которые позволяют объединить несколько входных данных в единую структуру, называемую "параллельными наблюдениями". ## Результаты Исследование проводилось на основе моделирования и экспериментов с различными техническими решениями. Были рассмотрены данные, для которых определялись различные уровни доверия. Результаты показали, что концепция уверенности позволяет улучшить точность и эффективность процесса обучения. Эксперименты проводились с разными наборами данных, в том числе с искусственными и реальными. Эти результаты подтвердили, что представление уверенности в универсальной форме позволяет лучше понять и контролировать процесс обучения. ## Значимость Полученные результаты имеют широкие приложения в области машинного обучения, статистической обработки данных и автоматической обработки естественного языка. Одним из основных преимуществ является улучшение моделей обучения, учитывающих доверительные оценки. Благодаря этому, модели становятся более точными и устойчивыми к шуму в данных. Это может привести к повышению качества решений в сложных ситуациях, где информация имеет различные степени достоверности. Также, полученные методы могут быть использованы в автоматической обработке естественного языка для повышения точности распознавания и анализа текста. ## Выводы Основными достижениями являются формальное определение понятия уверенности в процессе обучения и разработка универсальных методов ее измерения. Эти методы позволяют лучше понимать и оценивать влияние информации на модель обучения. Будущи

Abstract

We characterize a notion of confidence that arises in learning or updating beliefs: the amount of trust one has in incoming information and its impact on the belief state. This learner's confidence can be used alongside (and is easily mistaken for) probability or likelihood, but it is fundamentally a different concept -- one that captures many familiar concepts in the literature, including learning rates and number of training epochs, Shafer's weight of evidence, and Kalman gain. We formally axiomatize what it means to learn with confidence, give two canonical ways of measuring confidence on a continuum, and prove that confidence can always be represented in this way. Under additional assumptions, we derive more compact representations of confidence-based learning in terms of vector fields and loss functions. These representations induce an extended language of compound "parallel" observations. We characterize Bayes Rule as the special case of an optimizing learner whose loss representation is a linear expectation.

Ссылки и действия