Elastic представила переиспользуемую производственную систему оценки для агентного ИИ
На QCon AI Сьюзен Чанг (ведущий дата-сайентист Elastic) рассказала, как компания перешла от разрозненных ручных оценок агентов к единой производственной системе оценки, сочетающей LLM-вёрдикты и детерминированные правила, связывающей Python-оценки с TypeScript-продакшеном и использующей глубокий трассинг для обнаружения регрессий в RAG и кибербезопасности при сохранении контекста домена.