## Контекст Vision-language (VL) модели получили широкое применение в различных критически важных областях, благодаря их способности обрабатывать многоканальные данные. Однако их производительность часто снижается при распространении перехода, что делает необходимым оценивать и улучшать их жесткость в реальных условиях. Даже с учетом прогресса в VL-бенчмарках и данных для аугментации, существуют сложности, такие как неполное понимание поведения моделей и необходимость в руководстве экспертов для изучения закономерностей в данных. Visualization, как метод объяснения моделей и изучения больших данных, хорошо подходит для оценки влияния различных видов коррупции на VL-модели. Мы предлагаем VisMoDAl, революционный визуально-аналитический фреймворк, который оценивает жесткость VL-моделей к различным типам коррупции и выявляет проблемные образцы для оптимизации стратегий данных augmentations. ## Метод VisMoDAl основывается на тщательном анализе литературы и экспертных советов. Он предоставляет многоуровневую аналитику, включая оценку работы моделей под специфическими искажениями, инспекцию поведения моделей в задачах и расследование связанных сэмплов. Мы включили интерактивные визуализации и простые интерфейсы для пользователей, чтобы упростить рассуждения о модели и разработку эффективных стратегий. Благодаря этому, VisMoDAl обеспечивает понимание моделей и помогает формировать стратегии улучшения жесткости. Мы демонстрируем его результаты с помощью случаев использования и метрических оценок, сфокусированных на задаче изображений. ## Результаты Мы проводили эксперименты с использованием VisMoDAl для оценки жесткости VL-моделей с использованием различных коррупций и сэмплов. Наши результаты показали, что VisMoDAl действительно помогает выявить недостатки в моделях и провести расширенный анализ поведения моделей. Мы также показали, что наши стратегии данных augmentation, основанные на VisMoDAl, позволили улучшить жесткость моделей в задачах, таких как изображение-описание. ## Значимость VisMoDAl может применяться во многих практических областях, где VL-модели используются, включая обработку естественного языка и обработку изображений. Он предоставляет пользователям новые возможности для понимания и оптимизации моделей, улучшая их устойчивость и точность. Этот подход может привести к значительным улучшениям в различных приложениях, включая системы распознавания речи, анализ изображений и многие другие. ## Выводы VisMoDAl представляет собой первое полностью визуально-аналитическое решение для оценки и улучшения жесткости VL-моделей. Наши результаты показали, что он позволяет расследовать поведение моделей и привести к эффективным с