Transferring Expert Cognitive Models to Social Robots via Agentic Concept Bottleneck Models
2508.03998v1
cs.CL
2025-08-09
Авторы:
Xinyu Zhao, Zhen Tan, Maya Enisman, Minjae Seo, Marta R. Durantini, Dolores Albarracin, Tianlong Chen
Резюме на русском
Известно, что успешные коллективные мероприятия, такие как программы по изменению поведения, рабочие собрания и другие социальные контексты, должны способствовать личной концентрации, достижению целей и укреплению социальных связей. Однако фасилитаторы часто сталкиваются с трудностями в понимании социальных динамик, что влечет за собой необходимость разработки технологий, помогающих интерпретировать социальные взаимодействия. Мы предлагаем решение в виде социального робота-ко-фасилитатора, который анализирует мультимодальные данные совещаний и дает роботовские рекомендации фасилитатору. Фундаментальной особенностью этой системы является использование агентной модели концептных бутленков (CBM), основанной на человекочитаемых понятиях, таких как уровень участия и эмоциональные отзывы участников. Мы предлагаем рам框 работы для передачи экспертных моделей человеческого мышления в интерпретируемую роботовскую модель. Наши результаты показывают, что модель превосходно предсказывает необходимость вмешательства, а также обеспечивает гибкость в реальном времени. Благодаря этому, модель успешно распространяет навыки экспертов на новичков и повышает их эффективность в социальных задачах.
Abstract
Successful group meetings, such as those implemented in group
behavioral-change programs, work meetings, and other social contexts, must
promote individual goal setting and execution while strengthening the social
relationships within the group. Consequently, an ideal facilitator must be
sensitive to the subtle dynamics of disengagement, difficulties with individual
goal setting and execution, and interpersonal difficulties that signal a need
for intervention. The challenges and cognitive load experienced by facilitators
create a critical gap for an embodied technology that can interpret social
exchanges while remaining aware of the needs of the individuals in the group
and providing transparent recommendations that go beyond powerful but "black
box" foundation models (FMs) that identify social cues. We address this
important demand with a social robot co-facilitator that analyzes multimodal
meeting data and provides discreet cues to the facilitator. The robot's
reasoning is powered by an agentic concept bottleneck model (CBM), which makes
decisions based on human-interpretable concepts like participant engagement and
sentiments, ensuring transparency and trustworthiness. Our core contribution is
a transfer learning framework that distills the broad social understanding of
an FM into our specialized and transparent CBM. This concept-driven system
significantly outperforms direct zero-shot FMs in predicting the need for
intervention and enables real-time human correction of its reasoning.
Critically, we demonstrate robust knowledge transfer: the model generalizes
across different groups and successfully transfers the expertise of senior
human facilitators to improve the performance of novices. By transferring an
expert's cognitive model into an interpretable robotic partner, our work
provides a powerful blueprint for augmenting human capabilities in complex
social domains.
Ссылки и действия
Дополнительные ресурсы: