Task-Agnostic Learnable Weighted-Knowledge Base Scheme for Robust Semantic Communications
2509.11636v1
cs.IT, cs.AI, cs.NI, math.IT
2025-09-17
Авторы:
Shiyao Jiang, Jian Jiao, Xingjian Zhang, Ye Wang, Dusit Niyato, Qinyu Zhang
Резюме на русском
## Контекст
В связи с появлением огромных объемов разнообразных данных в системах шестого поколения (6G), роль целесообразной семантической связи становится ключевой. Она обеспечивает устойчивые интеллектуальные услуги в широком диапазоне задач. Однако существуют сложности в обработке неоднородных данных, включая шум, несоответствие классов и нехватку меток. Эти проблемы могут влиять на качество семантического восстановления. Мы предлагаем рассмотреть открытую проблему неустойчивости семантических систем в работе с реальной неоднородностью данных, учитывая характеристики 6G-систем. Задачей нашего исследования является разработка модели, которая была бы устойчивой к этим проблемам и обеспечивала бы высокую точность восстановления смысла в различных условиях.
## Метод
Мы предлагаем Task-Agnostic Learnable Weighted-Knowledge Base Semantic Communication (TALSC) — модель, которая при sроении на обучение включает в себя следующие компоненты: семантические сети кодирования (semantic coding networks), выступающие в качестве основных участников, и семантический знаний базы (knowledge base, KB). Наша модель использует весовое знание (weighted knowledge), которое хранится в KB и регулируется с помощью learnable weighted-KB (LW-KB). Для улучшения мета-обучения мы ввели Sample Confidence Module (SCM), который работает как мета-учитель и определяет веса примеров на основе фидбека по их затратам на задачу. Эта модель подстраивает обучение под различные условия, чтобы повысить устойчивость к шуму и несбалансированным классам. Мы также разработали SCM-Grid Extension (SCM-GE), который улучшает точность оценки важности примеров во время обучения, используя концепции spline refinement из Kolmogorov-Arnold Networks (KAN).
## Результаты
Мы проводили эксперименты на различных семантических задачах в области изображений. Для тестирования использовались различные данные, включая шумные и безымянные метки. Мы сравнили TALSC с состоянием технологии (SOTA) и получили следующие результаты: TALSC был устойчив к шуму, обеспечивал высокую точность восстановления смысла и повысил многомерную структурную схожесть (MS-SSIM) на 12% по сравнению с SOTA. Эти результаты показали, что SCM-GE отлично работает в режиме минимизации шумовых эффектов и улучшает устойчивость модели в незнакомых задачах.
## Значимость
Модель TALSC может быть применена в сферах, требующих высокого качества семантического восстановления данных, таких как искусственный интеллект, медицина, телекоммуникации и машинное обучение. Она обеспечивает устойчивость в ситуациях с неоднородными данными, уменьшая ошибки и улучшая качество обработки. Мы считаем, что в будущем модель может быть расширена
Abstract
With the emergence of diverse and massive data in the upcoming
sixth-generation (6G) networks, the task-agnostic semantic communication system
is regarded to provide robust intelligent services. In this paper, we propose a
task-agnostic learnable weighted-knowledge base semantic communication (TALSC)
framework for robust image transmission to address the real-world heterogeneous
data bias in KB, including label flipping noise and class imbalance. The TALSC
framework incorporates a sample confidence module (SCM) as meta-learner and the
semantic coding networks as learners. The learners are updated based on the
empirical knowledge provided by the learnable weighted-KB (LW-KB). Meanwhile,
the meta-learner evaluates the significance of samples according to the task
loss feedback, and adjusts the update strategy of learners to enhance the
robustness in semantic recovery for unknown tasks. To strike a balance between
SCM parameters and precision of significance evaluation, we design an SCM-grid
extension (SCM-GE) approach by embedding the Kolmogorov-Arnold networks (KAN)
within SCM, which leverages the concept of spline refinement in KAN and enables
scalable SCM with customizable granularity without retraining. Simulations
demonstrate that the TALSC framework effectively mitigates the effects of
flipping noise and class imbalance in task-agnostic image semantic
communication, achieving at least 12% higher semantic recovery accuracy (SRA)
and multi-scale structural similarity (MS-SSIM) compared to state-of-the-art
methods.