CrunchLLM: Multitask LLMs for Structured Business Reasoning and Outcome Prediction

## Контекст Определение успешности стартапа, то есть достижения экстоформы (акквариума или IPO), является ключевым вопросом в исследованиях по энтрепренериальной деятельности и инновациям. Данные Crunchbase содержат как структурированную информацию (например, раунды финансирования, отрасли, сети инвесторов), так и неструктурированный текст (например, описания компаний). Однако эффективное использование такого гибридного набора данных для прогнозирования выхода стартапов остается сложной задачей. Традиционные методы машинного обучения, ориентированные только на структурированные признаки, обычно демонстрируют умеренную точность. С другой стороны, большие языковые модели (LLMs) обладают сильными возможностями в логическом рассуждении, но сталкиваются с проблемами адаптации к конкретной сфере бизнеса. ## Метод CrunchLLM представляет собой доменно-адаптивную модель языкового моделирования, специализированную для прогнозирования успешности стартапов. Она объединяет структурированные атрибуты компаний, такие как финансовые данные и инвесторские сети, с неструктурированным текстовым контентом, таким как описания компаний. Методология CrunchLLM включает в себя параметрно-эффективную оптимизацию пунктов и техники обобщенного тренирования моделей, чтобы приспособить основные модели языкового моделирования к конкретным задачам в сфере бизнеса. Эта модель активно использует взаимодействие между структурированными и неструктурированными данными, что позволяет повысить точность прогнозирования. ## Результаты Эксперименты проводились на датасете Crunchbase, включающем подробные данные о стартапах и их результатах. Модель CrunchLLM показала точность более 80% при прогнозировании успешности стартапов, что значительно превосходит результаты традиционных классификаторов и других базовых моделей языкового моделирования. Более того, CrunchLLM создает интерпретируемые логические следы, которые объясняют свои прогнозы, обеспечивая деконструкцию и доверие в процессе принятия решений. ## Значимость Результаты модели CrunchLLM имеют практическое применение в таких областях, как финансовая аналитика, инвестиционная стратегия и политика инноваций. Особенно ценным является ее способность обеспечивать прозрачность и доверие в результатах, что крайне важно в сфере финансовых принятий решений. Кроме того, CrunchLLM может стать полезным инструментом для выявления ключевых факторов успеха в стартапах, который будет полезен как для практиков, так и для исследователей. ## Выводы CrunchLLM демонстрирует эффективность адаптации LLMs к конк