FlexUMM: гибкое обучение представлений для унифицированных мультимодальных моделей (arXiv)
Авторы представляют FlexUMM — модель-независимую схему, которая динамически решает, когда сохранять общие вычисления, когда перенаправлять специализированные ресурсы и когда прекращать дальнейшую обработку в унифицированных мультимодальных моделях. В статье приводятся данные, что такая гибкая аллокация снижает конфликт между задачами понимания и генерации, повышая точность и эффективность; код выложен на GitHub.