CROP: Integrating Topological and Spatial Structures via Cross-View Prefixes for Molecular LLMs

#### Контекст В последние годы наука о молекулах получила существенный подъем благодаря прорывным достижениям в области больших языковых моделей (LLMs). Однако, несмотря на их мощь, эти модели часто ограничены в своих возможностях, так как основываются только на последовательности молекул, не учитывая их сложные структуры. Топологические и пространственные структуры молекул представляют собой два дополняющих друг друга вида информации, которые помогают понять свойства и поведение молекул. Несмотря на эти возможности, существующие подходы либо неэффективны, либо не могут комбинировать эти два вида структур, что приводит к потере полезной информации. Для решения этой проблемы мы предлагаем CROP (CROss-view Prefixes) — метод, который эффективно интегрирует обе структурные представления молекул на основе новых концепций. #### Метод CROP представляет собой новую архитектуру, которая использует характеристики молекул, основанные на топологии и пространственных свойствах, для создания более полного представления. Метод включает два ключевых компонента: **SMILES Guided Resampler** и **Structural Embedding Gate**. SMILES Guided Resampler преобразует различные структурные представления (например, графы и изображения) в одну общую последовательность. Это позволяет эффективно использовать ограниченный контекст языковой модели. Затем Structural Embedding Gate преобразует эти преобразованные представления в входные данные для языковой модели. Это позволяет модели не только понимать сложные молекулярные структуры, но также улучшать предсказания свойств и характеристик. #### Результаты Мы провели многочисленные эксперименты для оценки CROP в различных задачах, включая мультимодальное понимание молекул, предсказание их свойств и генерацию химических формул. В сравнении с другими подходами CROP показал значительную выигрышную сторону. Например, в задаче мультимодального понимания, где необходимо совместно использовать графические и изображенияльные представления молекул, CROP превысил другие модели по точности и качеству результатов. Также он улучшил предсказания свойств молекул, таких как степень окисления и молекулярная масса. #### Значимость Метод CROP открывает новые возможности для понимания и применения молекул в различных областях, таких как химическое производство, фармакология и экология. Он позволяет языковым моделям лучше понимать и предсказывать свойства молекул, не только на основе последовательностей, но также с учетом их сложной структуры. Это влечет за собой повышение точности моделей и повышение эффективности в широком спектре приложений. #### Выводы CROP представляет собой прорыв в