Any-Step Density Ratio Estimation via Interval-Annealed Secant Alignment
2509.04852v1
stat.ML, cs.LG
2025-09-09
Авторы:
Wei Chen, Shigui Li, Jiacheng Li, Jian Xu, Zhiqi Lin, Junmei Yang, Delu Zeng, John Paisley, Qibin Zhao
Резюме на русском
#### Контекст
Any-step density ratio estimation (DRE) является ключевым проблемой в машинном обучении, обладающим широкими приложениями в задачах, таких как смарт-трейдинг, динамический риск-минтинг, и генетические алгоритмы. Однако, существующие методы часто страдают от торговли между точностью и эффективностью. Например, в задачах смарт-трейдинга, точность DRE может повлиять на качество рекомендаций, тогда как в задачах генетических алгоритмов может быть жертвовано эффективностью, чтобы достичь точности. Из-за этого, разработка метода, который обеспечивает как точность, так и эффективность, была долгосрочной целью в области.
#### Метод
Предлагаемый метод, **Interval-annealed Secant Alignment Density Ratio Estimation (ISA-DRE)**, новый подход к DRE. Он избегает непосредственного моделирования тангентов, которые используются в традиционных методах, а вместо этого учит глобальную функцию секанта, которая является средним значением тангентов над интервалом. Это обеспечивает более низкую переменой и позволяет удобнее использовать для нейронных аппроксимаций. Основной инструментом является **Secant Alignment Identity**, который синхронизирует секантную функцию с её тангентными представлениями. Чтобы улучшить стабильность обучения в начальных этапах, мы представили **Contraction Interval Annealing**, стратегию, постепенно расширяющую интервал в процессе обучения, что приводит к зарождению контрактирующего отображения и улучшению устойчивости обучения.
#### Результаты
Проведенные эксперименты показали, что ISA-DRE достигает конкурентной точности с значительно меньшим числом вызовов функций по сравнению с предыдущими методами. Например, в задаче смарт-трейдинга, ISA-DRE показал скорость работы, которая значительно превосходит существующие методы. Это делает ISA-DRE подходящим для реального времени и интерактивных приложений.
#### Значимость
ISA-DRE может быть применен в широком спектре задач машинного обучения, таких как задачи смарт-трейдинга, динамическое риск-минтинг, и генетические алгоритмы. Его отличительным качеством является более высокая точность с меньшим количеством вызовов функций, что делает его уникальным в сравнении с другими подходами. Такой подход позволяет использовать метод в ситуациях, где необходима высокая реактивность и стабильность, таких как экономические модели и интерактивные системы.
#### Выводы
Предлагаемый ISA-DRE является прорывом в области DRE, обеспечивая высокую точность с меньшим количеством вызовов функций. Будущие исследования будут сконцентрированы на расширении этого подхода для других машинного обучения задач, включая слож
Abstract
Estimating density ratios is a fundamental problem in machine learning, but
existing methods often trade off accuracy for efficiency. We propose
\textit{Interval-annealed Secant Alignment Density Ratio Estimation (ISA-DRE)},
a framework that enables accurate, any-step estimation without numerical
integration.
Instead of modeling infinitesimal tangents as in prior methods, ISA-DRE
learns a global secant function, defined as the expectation of all tangents
over an interval, with provably lower variance, making it more suitable for
neural approximation. This is made possible by the \emph{Secant Alignment
Identity}, a self-consistency condition that formally connects the secant with
its underlying tangent representations.
To mitigate instability during early training, we introduce \emph{Contraction
Interval Annealing}, a curriculum strategy that gradually expands the alignment
interval during training. This process induces a contraction mapping, which
improves convergence and training stability.
Empirically, ISA-DRE achieves competitive accuracy with significantly fewer
function evaluations compared to prior methods, resulting in much faster
inference and making it well suited for real-time and interactive applications.
Ссылки и действия
Дополнительные ресурсы: