FREE
$0- Персональная лента и сохранённые материалы
- До 20 компаний, моделей и тем
- Еженедельный Meridian Brief на почту
АНАЛИТИКА AI-ИНДУСТРИИ
Один инфоповод — все источники. Классификация, оценка и краткий разбор в реальном времени.
TODAY · BRIEF
МОЙ MERIDIAN · ТАРИФЫ
Общая лента остаётся открытой. Аккаунт добавляет персонализацию, Pro — рабочие списки и ежедневный бриф.
$70 в год · 2 месяца бесплатно
Exphormer — это фреймворк с разреженным вниманием для графовых трансформеров от Google Research (представлен на ICML 2023), который заменяет плотный граф взаимодействий полным вниманием на разрежённый d-регулярный экспандер (используется случайная конструкция Фридмана, близкая к раманджуану). Подход комбинирует ребра экспандера с входным графом и виртуальными узлами, даёт линейное число рёбер и показывает сильные эмпирические результаты на разных графовых датасетах; реализация доступна на GitHub.
Почему это важно: Снижение квадратичной сложности полного внимания на графах с помощью разрежённого графа взаимодействий на основе экспандеров делает трансформеры применимыми к значительно большим графовым данным.
ОТКРЫТЬ СОБЫТИЕ →Allow Google Analytics to measure visits? It stays off until you choose. You can change your choice at any time.