Do Political Opinions Transfer Between Western Languages? An Analysis of Unaligned and Aligned Multilingual LLMs
2508.05553v1
cs.CL, cs.CY, I.2.7; J.4
2025-08-09
Авторы:
Franziska Weeber, Tanise Ceron, Sebastian Padó
Резюме на русском
**Резюме**
В этой работе исследованы кросс-культурные различия в политических представлениях между западными языками и возможность их передачи между языками с помощью многоязычных больших языковых моделей (МЛЛМ). Авторы оценили, передаются ли политические представления между языками или же существуют отдельные политические позиции для каждого языка в МЛЛМ, исследуя модели разных размеров на пяти западных языках. Оценки проводились с помощью предложений из викторина по политическим вопросам. Для расширения понимания взаимодействия между языками модели анализировались как до, так и после их скорректированной политической ориентации (более левой или правой), использовав технику direct preference optimization и внешние данные для выравнивания. Наблюдались только незначительные кросс-языковые различия до выравнивания, но политическое выравнивание значительно изменило положения моделей почти во всех языках. Таким образом, в Западных языках политические представления трансферируются между языками, что подчеркивает сложности достижения кросс-культурного и кросс-языкового выравнивания МЛЛМ.
Abstract
Public opinion surveys show cross-cultural differences in political opinions
between socio-cultural contexts. However, there is no clear evidence whether
these differences translate to cross-lingual differences in multilingual large
language models (MLLMs). We analyze whether opinions transfer between languages
or whether there are separate opinions for each language in MLLMs of various
sizes across five Western languages. We evaluate MLLMs' opinions by prompting
them to report their (dis)agreement with political statements from voting
advice applications. To better understand the interaction between languages in
the models, we evaluate them both before and after aligning them with more left
or right views using direct preference optimization and English alignment data
only. Our findings reveal that unaligned models show only very few significant
cross-lingual differences in the political opinions they reflect. The political
alignment shifts opinions almost uniformly across all five languages. We
conclude that in Western language contexts, political opinions transfer between
languages, demonstrating the challenges in achieving explicit socio-linguistic,
cultural, and political alignment of MLLMs.