Exploring the Challenges and Opportunities of AI-assisted Codebase Generation

## Контекст Современные AI-помощники по кодированию (CBAs) показали себя как мощные инструменты, улучшающие процесс структурирования и генерирования программного кода. Они предлагают возможность генерировать и адаптировать всю структуру программы на основе текстового описания, превосходя при этом многие предыдущие подходы, ограниченные генерированием участков кода (snippet-level). Несмотря на перспективу, CBAs еще не получили такую популярность, как более простые сниппет-генераторы. Ранее изучалось генерирование кода на уровне сниппетов, но CBAs, охватывающие более широкий спектр задач, требуют подробного изучения. Эта работа нацелена на выявление проблем, с которыми сталкиваются разработчики при использовании CBAs, а также на выявление возможностей для оптимизации этих систем. ## Метод Для изучения проблем при работе с CBAs была проведена пользовательская исследовательская исследовательская сессия (user study), в которой участвовали 16 разработчики и студенты. Участники выполняли задачи по кодированию, используя различные CBAs. На каждом этапе исследования было собрано подробное журнал событий, описывающие взаимодействия участников с системами. Были проведены интервью для получения более детальных отзывов и анализа опыта взаимодействия. Затем проведено сравнение 21 коммерческих CBAs с выявленными проблемами и необходимостями. ## Результаты Участники различались в стратегиях подачи информации во вводных запросах (prompts). Более четверти запросов содержали описания проблем, почти все — требования функциональности, а 48% — структурные запросы. Однако полученные результаты не удовлетворили участников. Низкая оценка качества кода (mean = 2.8, median = 3) была самой распространенной причиной недовольства, за которой следовали проблемы с коммуникацией и неполноте функциональности. Основные барьеры включали неполное понимание требований, проблемы с настройкой программ, и несовпадение ожиданий. Также выявлены шесть основных проблем, с которыми сталкиваются разработчики при использовании CBAs. ## Значимость Результаты имеют решающее значение для развития AI-помощников по кодированию. Изучение проблем и недочетов при использовании CBAs позволяет раскрыть потенциал этих систем для развития программирования. Оптимизация CBAs способна влиять на скорость разработки, качество кода и удовлетворенность пользователей. Открытые возможности включают развитие более гибких моделей для лучшего взаимодействия с пользователем и более эффективного использования при работе с большими кодовыми базами. ## Выводы Основные достижения: - Раскрыта многообраз