Assessing local deformation and computing scalar curvature with nonlinear conformal regularization of decoders

## Контекст Одна из основных задач в области машинного обучения — выявление основных факторов, объясняющих данные. Это ключевая проблема во многих приложениях, извлекающих полезные структуры из высокомерных данных. Автокодировщики (autoencoders) — это мощный инструмент для решения этой задачи. Они состоят из двух основных компонентов: энкодера (кодировщика), который преобразует входные данные в низкомерное представление, и декодера (декодировщика), позволяющего восстановить исходные данные из этого представления. Таким образом, автокодировщики позволяют учить множество низкомерных множеств, представляющих оптимальные низкомерные репрезентации входных данных. Однако, несмотря на их эффективность, в стандартных автокодировщиках нерегулируемость множеств обучения может привести к локальным деформациям и нечеткости манифолтов. Данная статья предлагает новую методологию — **nonlinear conformal regularization** — для решения этой проблемы. ## Метод В этой работе предлагается новый подход к геометрической регуляризации в автокодировщиках. **Nonlinear conformal regularization** (NCR) добавляет к традиционной архитектуре автокодировщика новый компонент — **conformal factor**. Это скалярное поле, которое измеряет локальные деформации, возникающие при преобразовании низкомерного множества обратно в исходное пространство. Регуляризатор выражается с помощью нелинейного распределения, что дает гибкость в учете локальных деформаций. Эта техника также позволяет вычислить **scalar curvature** (геометрическую кривизну) манифолта, учитывая локальные дисторсии. Архитектура NCR включает в себя усовершенствованный декодер с конформирующим регуляризатором, который обеспечивает не только эффективное учеть локальных деформаций, но и позволяет оценивать геометрические свойства обученного множества. ## Результаты Эксперименты проводились на двух датасетах: **Swiss roll** и **CelebA**. На **Swiss roll** демонстрируется как NCR позволяет сохранить локальную структуру данных при разложении на множество, уменьшая дисторсии и улучшая точность. На **CelebA** NCR используется для измерения геометрической кривизны низкомерных поверхностей, полученных с помощью автокодировщика. На графиках показаны различные метрики локальных деформаций, включая scalar curvature, что демонстрирует то, как NCR позволяет контролировать и измерять геометрические свойства данных. Результаты показывают значительное улучшение точности и стабильности в сравнении с базовым автокодировщиком. ## Значимость NCR может быть применено в различных приложениях, где геометрические свойства множества играют ключевую роль, таких как **геометрическая аналитика**,