Adoption of Explainable Natural Language Processing: Perspectives from Industry and Academia on Practices and Challenges

## Контекст Появление сложных моделей естественного языкового обработки (NLP) привело к росту необходимости в прозрачности и понятных объяснениях их решений. Это важно для понимания их работы и эффективного использования в высокорисковых сферах, таких как медицина, финансы и законодательство. Однако понимание причин и механизмов принятия решений в таких моделях часто остается затруднительным, что может привести к недоверию и неэффективному применению. Это, в свою очередь, отталкивает практиков от их широкого использования. Несмотря на возрастающую акцентуацию на объяснимости в области NLP, практикующихся специалистов и их опыт с этим аспектом по-прежнему остаются недостаточно изученными. Этот рост заинтересованности в объяснимости NLP во многом связан с тем, что большинство моделей становятся все более сложными и "черно boxes", что снижает их прозрачность и, как следствие, снижает уверенность в их использовании в практических приложениях. Таким образом, в данной работе авторы стремятся объединить перспективы от области индустрии, где NLP применяется для решения реальных проблем, и от академического мира, где происходит развитие новых методов. Целью исследования является изучение удовлетворенности пользователей от текущих методов объяснения, выявление основных проблем и поиск путей улучшения. ## Метод Для изучения вопросов, связанных с применением методов объяснения в NLP, авторы проводят квалитативное исследование с использованием интервью. Они проводят интервью с практиками из индустрии, которые применяют NLP в своих проектах, и с академическими исследователями, работающими над развитием этих методов. В интервью используются открытые вопросы, чтобы получить подробную информацию о ситуации, с которой сталкиваются практики в процессе применения объяснимости в NLP. Также выясняются уровни удовлетворенности от использования технологий, типы методов, которые используются, и трудности, с которыми сталкиваются в реальном мире. В работе также проводится сравнение ответов от практиков и исследователей, чтобы выявить концептуальные различии в понимании и применении понятия "объяснение" в NLP. Это позволяет систематически разделить мнения от разных сторон и выявить общие тенденции и отличия. ## Результаты Из интервью выясняется, что практики часто сталкиваются с проблемами, связанными с недостаточной понятностью решений, которые выдают модели NLP. Они выделяют недостаток в естественных и понятных формах объяснений, что приводит к недоверию к результатам моделей. На практике практики часто приходят к выводу, что текущие методы объяснения не удовлетво