Ad hoc conventions generalize to new referents
2509.05566v1
cs.CL, cs.CY
2025-09-10
Авторы:
Anya Ji, Claire Augusta Bergey, Ron Eliav, Yoav Artzi, Robert D. Hawkins
Резюме на русском
#### Контекст
В области исследований взаимодействия человека и технологий возникает вопрос: как люди устанавливают связи между незнакомыми объектами и словами? Одна группа ученых утверждает, что это происходит благодаря установлению случайных арбитражных связей, которые не могут расширяться за их исходный контекст. Другая группа предлагает, что установление общего понимания происходит благодаря ширейному алignment понятий, который может повлиять на семантическое пространство каждого участника, чтобы обеспечить новые связи. Мы исследуем эти гипотезы с помощью диадического эксперимента, используя данные KiloGram, содержащие многочисленные абстрактные изображения.
#### Метод
В эксперименте участвовали 302 человека, разделенные на пары. Они должныли установить общие ссылочные значения для абстрактных изображений, используя разные способы общения. Затем мы измерили возможность генерлизовать эти значения для новых изображений. Использовались данные KiloGram со списком разных абстрактных танграм-изображений. Эта операционная среда позволяла изучить возможность общего понимания для новых объектов.
#### Результаты
Участники показали сильную общую алигнментный подход при создании новых ссылок. Этот подход был наиболее эффективен для изображений, которые отличались сильно по визуальным характеристикам. Эти результаты были постоянными для разных уровней назначенных имен именованных изображений. Это указывает на то, что общее понимание объектов не случайно, а является результатом широкого концептуального alignment.
#### Значимость
Наши результаты подтверждают, что выработка общих именований не происходит случайно, а является результатом широкого и целенаправленного концептуального понимания. Эти знания могут быть использованы для создания более мощных технологий глубокого обучения, которые могут более эффективно работать с новыми данными в реальном времени.
#### Выводы
Мы показали, что общее понимание взаимодействия возникает в результате глубокого концептуального кодирования, которое может быть использовано для успешного общения. Наши результаты могут быть использованы в развитии технологий, которые могут более эффективно обрабатывать новые объекты и ситуации. Будущие исследования будут сосредоточены на углублении понимания того, как люди устанавливают связи между новыми объектами и языком.
Abstract
How do people talk about things they've never talked about before? One view
suggests that a new shared naming system establishes an arbitrary link to a
specific target, like proper names that cannot extend beyond their bearers. An
alternative view proposes that forming a shared way of describing objects
involves broader conceptual alignment, reshaping each individual's semantic
space in ways that should generalize to new referents. We test these competing
accounts in a dyadic communication study (N=302) leveraging the
recently-released KiloGram dataset containing over 1,000 abstract tangram
images. After pairs of participants coordinated on referential conventions for
one set of images through repeated communication, we measured the extent to
which their descriptions aligned for undiscussed images. We found strong
evidence for generalization: partners showed increased alignment relative to
their pre-test labels. Generalization also decayed nonlinearly with visual
similarity (consistent with Shepard's law) and was robust across levels of the
images' nameability. These findings suggest that ad hoc conventions are not
arbitrary labels but reflect genuine conceptual coordination, with implications
for theories of reference and the design of more adaptive language agents.
Ссылки и действия
Дополнительные ресурсы: