FLUX-Reason-6M & PRISM-Bench: A Million-Scale Text-to-Image Reasoning Dataset and Comprehensive Benchmark

## Контекст Текстово-изображенческие (T2I) модели, которые генерируют изображения на основе текстовых описаний, получили широкое применение в различных областях, включая искусственное интеллектуальное творчество, развитие графического дизайна и визуализацию содержимого. Однако существуют значительные проблемы в их развитии, определенной частью которых является недостаток больших данных, фокусированных на логическом соотнешении текстов и изображений. Большинство доступных T2I-датасетов и оценочных бенчмарков ограничены либо в размере, либо в детализации, что приводит к заметному разрыву в качестве генерируемых изображений между открытыми и закрытыми системами. Для решения этой проблемы предлагается новая масштабная методология, способная поднять стандарты глубокого анализа и генерирования в области T2I. ## Метод FLUX-Reason-6M - это инновационный датасет, состоящий из 6 миллионов высококачественных изображений, сгенерированных FLUX-моделью, и 20 миллионов билингвальных описаний (английский и китайский), которые предназначены для развития умений на глубоком логическом уровне. Изображения разделены на шесть категорий: Диалог, Образ, Текст, Стиль, Эмоциональный Уровень, Композиция. Каждое изображение сопровождается гидравлическим цепью мышления (Generation Chain-of-Thought, GCoT), которая подробно описывает шаги по созданию изображения. Дополнительно представлен PRISM-Bench - методология оценки, включающая 7 отдельных тестов: Основные Тесты, Оценка Стиля, Оценка Детализации, Оценка Достоверности, Тест Убежденности, Тест Объектности и Тест Логического Развития. Эти тесты используют визуально-языковые модели для точного анализа генерируемых изображений на уровне визуально-текстового анализа и критериев красоты. ## Результаты Используя FLUX-Reason-6M и PRISM-Bench, проведены эксперименты с 19 различными T2I-моделями, включая как открытые, так и закрытые системы. Эксперименты продемонстрировали значительные разрывы в качестве генерируемых изображений, особенно в сложных задачах, таких как логический анализ текста и изображений. На PRISM-Bench, где оцениваются сложные тексты, наибольшие проблемы выявлены в области глубокого понимания текста, а также в аккуратности и стилевом выполнении. Эти результаты подтверждают необходимость дальнейшего улучшения в области T2I-генерирования. ## Значимость Данный датасет и бенчмарк имеют революционное значение для развития открытого T2I-генерирования. Они предоставляют широкую базу для обучения и оценки моделей, позволяя улуч