Targeted Fine-Tuning of DNN-Based Receivers via Influence Functions

#### Контекст В последние годы глубокое обучение (Deep Learning, DL) нашло широкое применение в различных областях, включая сети связи. Например, глубокие нейронные сети (Deep Neural Networks, DNN) используются для построения рациональных и эффективных ресиверов, которые могут быстро обрабатывать большие объемы данных при минимальных потерях. Однако, существуют проблемы в том, что многие из этих ресиверов неэффективны в условиях высокой сложности сигналов или изменяющихся условий сети. Это приводит к необходимости в инструментах для точного адаптации и оптимизации таких систем. Задача этой работы — рассмотреть новый подход к адаптации DNN-ресиверов, который основывается на использовании функций влияния (Influence Functions) для поиска и корректировки неудачных обучающих примеров. #### Метод Исследование основывается на технологии влияния, которая используется для поиска эффективности обучения. Авторы применяют этот подход к DNN-ресиверам, оптимизировав их поведение во время обучения. Основной архитектурой, используемой в работе, является сеть DeepRx, которая является полностью управляемой сверточной сетью. Алгоритмы используются для вычисления влияния каждого обучающего примера на результат предсказания битов. Таким образом, можно определить, какие примеры влияют на ошибки, и чтобы скорректировать их при помощи целевой модификации. Техниками, применяемыми в этой работе, являются first-order и second-order updates, которые позволяют регулировать влияние обучающих примеров на результат. #### Результаты В ходе экспериментов авторы проводят различные тесты, сравнивая результаты применительно к случаю случайной модификации и модификации с помощью функций влияния. Они используют данные, полученные в рамках модели DNN-ресивера DeepRx. Обнаруживается, что применение influence functions позволяет повысить точность работы системы в одиночном случае. Например, при использовании loss-relative influence с binary cross-entropy loss, а также применении first-order updates на выбранные примеры, степень улучшения bit error rate (BER) достигается до genie-aided performance. Однако, при использовании multi-target adaptation результаты оказываются менее эффективными, что подчеркивает некоторые ограничения данного подхода. #### Значимость Результаты этого исследования приложимы к различным областям, включая системы связи, где необходимо корректировать поведение DNN-ресивера в зависимости от условий сети. Одним из основных преимуществ этого подхода является возможность точной адаптации системы к конкретным обстоятельствам, что может улучшить её производительность и надежность. Более того, функции влияния могут использоваться в качестве инструмента для понимания и интерпретации результатов обучения, что в будущем может помочь в создании более