Руководитель по политике Hugging Face: встроенные оценщики ИИ — не простое решение
Ирен Солайман, руководитель по политике Hugging Face, на TechCrunch Disrupt заявила, что методики бенчмаркинга моделей находятся в стадии развития и часто непоследовательны, а вопросы воспроизводимости и сопоставимости тестов остаются нерешёнными. Она предупредила, что предлагаемый подход с внедрёнными сторонними оценщиками внутри AI‑организаций сталкивается с серьёзными проблемами стандартизации, квалификации оценщиков и эффективности.