GenAI Voice Mode in Programming Education

Отрывок из журнала 2024 года ## Контекст Реальное временное взаимодействие с искусственным интеллектом (ИИ) через голосовые интерфейсы начинает приобретать важность в области программирования, особенно для начинающих разработчиков. Одной из значимых проблем, с которой сталкиваются начинающие программисты, является недостаток доступности инструментов, предназначенных для поддержки их обучения. Например, программисты с ограниченными физическими возможностями, такими как проблемы с зрением, могут испытывать трудности при использовании стандартных интерфейсов кода. Генетические системы Generative AI (GenAI) могут стать решением для повышения доступности, стимулируя новую модель обучения программированию. Однако, несмотря на значительные достижения в генерировании речевых моделей, лишь мало что известно о том, как начинающие программисты взаимодействуют с такими системами на практике, а также о качестве обратной связи в форме звукового вывода. Эта проблема является одной из мотиваций для данного исследования. ## Метод Для исследования взаимодействия начинающих программистов с генетическим генеративным искусственным интеллектом (GenAI) был разработан возможность использовать голосовой интерфейс в обучении Python. Исследование проводилось в аутентичной учебной среде с участием девяти учеников 9 класса. Для получения данных были зафиксированы голосовые запросы учащихся и ответы системы (1210 сообщений), которые были анализированы с помощью квалитативного кодирования. Было также проведено исследование восприятия учащихся взаимодействия с GenAI с помощью опросника Partner Modeling Questionnaire. Это позволило собрать данные как из технической, так и из психологической точки зрения. ## Результаты Генетический генеративный искусственный интеллект (GenAI) предоставлял обратную связь в виде частичного кода, ответы на вопросы и советы по дальнейшим действиям. Однако, несмотря на важность такой функциональности, система демонстрировала только среднее качество работы. Точность ответов составила 71.4% из 416 образцов анализируемых ответов. Особенно сильной проблемой было понимание и вывод кода, где зачастую ответы были неточными. Учащиеся использовали GenAI в основном для поиска и устранения ошибок в коде. Восприятие системы учащимися было, в основном, положительным — система считалась компетентной и гибкой, но не очень удобной для полноценного общения. ## Значимость Полученные результаты могут быть использованы для улучшения дизайна голосовых интерфейсов в обучении программированию. Это может стать основой для разработки инструментов