НОВОСТЬ · RESEARCH · #408
Cohere Labs: ограничения оценок «GPTs are GPTs» 2023 года влияют на политику
Cohere Labs утверждает, что широко цитируемая работа 2023 года «GPTs are GPTs», оценившая степень «экспозиции» задач в профессиях США к LLM, была ограниченным техническим исследованием, привязанным к модели 2023 года и американской таксономии профессий, но её оценки теперь используются МВФ, ОЭСР, Сенатом США и другими для разработки политик 2026 года. В аналитике подчеркивается, что ограничения усиливаются при переносе оценок между моделями, странами и профессиями с неформализуемыми задачами, и призывается к более динамичным, репрезентативным инструментам измерения и вовлечению работников.
КЛЮЧЕВЫЕ ТЕЗИСЫ
- Cohere Labs утверждает, что широко цитируемая работа 2023 года «GPTs are GPTs», оценившая степень «экспозиции» задач в профессиях США к LLM, была ограниченным техническим исследованием, привязанным к модели 2023 года и американской таксономии профессий, но её оценки теперь используются МВФ, ОЭСР, Сенатом США и другими для разработки политик 2026 года.
- В аналитике подчеркивается, что ограничения усиливаются при переносе оценок между моделями, странами и профессиями с неформализуемыми задачами, и призывается к более динамичным, репрезентативным инструментам измерения и вовлечению работников.
- Политики, опирающиеся на статические оценки 2023 года, рискуют принимать решения на основе устаревших, специфичных для США и разложенных на задачи оценок, а не на данных, учитывающих текущие модели, разные рынки труда и неформализуемые аспекты работы.
ПОЧЕМУ ЭТО ВАЖНО
Политики, опирающиеся на статические оценки 2023 года, рискуют принимать решения на основе устаревших, специфичных для США и разложенных на задачи оценок, а не на данных, учитывающих текущие модели, разные рынки труда и неформализуемые аспекты работы.