ИССЛЕДОВАНИЕ · RESEARCH · #1117
Spectral Feedback: выбор позиций для правки во время инференса в дискретных белковых диффузионных моделях
Новая статья на arXiv (arXiv:2609.30456v1) представляет Spectral Feedback — универсальный алгоритм, который на этапе инференса итеративно выбирает позиции токенов для повторного маскирования и пересэмплирования, позволяя модели исправлять собственные генерации. В задаче обратного белкового сворачивания с оракулом стабильности белков метод повышает долю стабильных белков на 32.3% для предобученной модели, на 24.8% для Best-of-10 и на 5.8% для RL-файнтюнингованной диффузионной модели.
КЛЮЧЕВЫЕ ТЕЗИСЫ
- Новая статья на arXiv (arXiv:2609.30456v1) представляет Spectral Feedback — универсальный алгоритм, который на этапе инференса итеративно выбирает позиции токенов для повторного маскирования и пересэмплирования, позволяя модели исправлять собственные генерации.
- В задаче обратного белкового сворачивания с оракулом стабильности белков метод повышает долю стабильных белков на 32.3% для предобученной модели, на 24.8% для Best-of-10 и на 5.8% для RL-файнтюнингованной диффузионной модели.
- Статья предлагает новый механизм выравнивания на этапе инференса (оптимизация позиций правок через разреженное Фурье-представление), универсальный для моделей и дающий заметные улучшения в задачах дизайна белков без изменения генеративной модели.
ПОЧЕМУ ЭТО ВАЖНО
Статья предлагает новый механизм выравнивания на этапе инференса (оптимизация позиций правок через разреженное Фурье-представление), универсальный для моделей и дающий заметные улучшения в задачах дизайна белков без изменения генеративной модели.