Equi-mRNA: Protein Translation Equivariant Encoding for mRNA Language Models
2508.15103v1
q-bio.QM, cs.AI
2025-08-23
Авторы:
Mehdi Yazdani-Jahromi, Ali Khodabandeh Yalabadi, Ozlem Ozmen Garibay
Резюме на русском
#### ##Контекст
В последние годы возрастает важность mRNA-терапевтических технологий и синтетической биологии. Эти области требуют моделей, которые могли бы правильно интерпретировать структуры между сонами — различными тройками нуклеотидов, кодирующими один и тот же аминокислоты. Эти симметрии влияют на эффективность трансляции и генное выражение. Несмотря на некоторые успехи в интеграции кодонных биаса в модели, текущие подходы либо недостаточно эффективны, либо не учитывают выразительные симметрии, встроенные в генетический код. Это ограничивает возможности моделей для точного предсказания генетических свойств и поддержки инновационных технологий в области медицины и биотехнологий.
#### ##Метод
Equi-mRNA представляет собой первую модель mRNA-языковых моделей, которая учитывает кодонные симметрии как циклические подгруппы 2D Special Orthogonal matrix (SO(2)). Эти симметрии реализуются с помощью соответствующих преобразований матриц, обеспечивающих групповые свойства. Также в модель включен ауксиллиарный механизм "equivariance loss", который заставляет модель прислушиваться к этим симметриям. Для точного вывода и рассуждений включена "symmetry-aware pooling", обеспечивающая синтез информации с разных уровней модели. Эта архитектура позволяет Equi-mRNA учитывать биологические свойства, которые важны для предсказания атрибутов генов.
#### ##Результаты
Запуск Equi-mRNA проводился на нескольких датасетах, включая задачи предсказания генной эффективности, устойчивости мRNA и функциональных свойств riboswitches. На этих задачах Equi-mRNA показала эффективность с улучшениями до 10% в точности предсказания по сравнению с базовыми моделями. Также была проведена задача генного синтеза, где модель выдавала значительно более реалистичные mRNA-конструкты по метрикам Frechet BioDistance, а также повышала точность сохранения функциональных свойств до 28%. Интерпретативные анализы Equi-mRNA указали на воспроизведение биологически известных закономерностей, таких как связь между группами GC-содержания и абундантом тРНК, что дает новый взгляд на кодонную эволюцию.
#### ##Значимость
Equi-mRNA открывает новую парадигму для mRNA-моделей, имеющую практические приложения в синтетической биологии и терапевтических разработках. Она позволяет строить модели, близкие к биологическим процессам, что повышает точность и эффективность предсказаний. Эти достижения могут повлиять на создание более точных терапевтических методов, а также на понимание сложного взаимодействия между генами и средой. Эта модель также имеет по
Abstract
The growing importance of mRNA therapeutics and synthetic biology highlights
the need for models that capture the latent structure of synonymous codon
(different triplets encoding the same amino acid) usage, which subtly modulates
translation efficiency and gene expression. While recent efforts incorporate
codon-level inductive biases through auxiliary objectives, they often fall
short of explicitly modeling the structured relationships that arise from the
genetic code's inherent symmetries. We introduce Equi-mRNA, the first
codon-level equivariant mRNA language model that explicitly encodes synonymous
codon symmetries as cyclic subgroups of 2D Special Orthogonal matrix (SO(2)).
By combining group-theoretic priors with an auxiliary equivariance loss and
symmetry-aware pooling, Equi-mRNA learns biologically grounded representations
that outperform vanilla baselines across multiple axes. On downstream
property-prediction tasks including expression, stability, and riboswitch
switching Equi-mRNA delivers up to approximately 10% improvements in accuracy.
In sequence generation, it produces mRNA constructs that are up to
approximately 4x more realistic under Frechet BioDistance metrics and
approximately 28% better preserve functional properties compared to vanilla
baseline. Interpretability analyses further reveal that learned codon-rotation
distributions recapitulate known GC-content biases and tRNA abundance patterns,
offering novel insights into codon usage. Equi-mRNA establishes a new
biologically principled paradigm for mRNA modeling, with significant
implications for the design of next-generation therapeutics.
Ссылки и действия
Дополнительные ресурсы: