ИНВЕСТИЦИИ · MODELS · #3874
Amazon запускает таблицу лидеров SageMaker JumpStart для сравнения LLM
AWS добавила в SageMaker Studio представление «Таблица лидеров» для SageMaker JumpStart, которое ранжирует более 70 открытых фундаментальных моделей по качеству (BIG‑Bench Hard, GPQA Diamond, MMLU‑Pro) и показывает измеренные показатели производительности и ориентировочную стоимость вывода при стандартизованной оценке и конфигурациях развертывания JumpStart.
КЛЮЧЕВЫЕ ТЕЗИСЫ
- AWS добавила в SageMaker Studio представление «Таблица лидеров» для SageMaker JumpStart, которое ранжирует более 70 открытых фундаментальных моделей по качеству (BIG‑Bench Hard, GPQA Diamond, MMLU‑Pro) и показывает измеренные показатели производительности и ориентировочную стоимость вывода при стандартизованной оценке и конфигурациях развертывания JumpStart.
- Это даёт сопоставимые внутри SageMaker показатели по бенчмаркам, задержке и стоимости, упрощая выбор модели и решения о развертывании.
- Introducing the Amazon SageMaker JumpStart Model Leaderboard
ПОЧЕМУ ЭТО ВАЖНО
Это даёт сопоставимые внутри SageMaker показатели по бенчмаркам, задержке и стоимости, упрощая выбор модели и решения о развертывании.