НОВОСТЬ · RESEARCH · #153
GAVEL: протокол вынесения вердикта на основе LLM для сравнения и слияния клинических хронологий из клинических отчетов
Авторы представляют GAVEL — протокол на основе LLM, который сравнивает две извлеченные клинические хронологии с исходным клиническим отчетом и возвращает для каждой разницы тип несоответствия, вердикт и фрагмент отчета. В работе оценивают сопоставитель событий и анализируют 2 738 выводов от GPT5.6sol и DeepSeek V3.2, ранжируют шесть извлекателей на базе LLM и двух человеческих аннотаторов, а также тестируют слияние под управлением GAVEL: по 126 отчетам объединенные хронологии предпочитали в 77,0% сравнений, несоответствия, приписываемые проверяемой хронологии, сократились с 7.63 до 0.85 на отчет; ручная проверка подтвердила 89.4% и 88.6% выводов, истинные показатели совпадения составили 60% сразу ниже и 48% сразу выше порога 0.10.
КЛЮЧЕВЫЕ ТЕЗИСЫ
- Авторы представляют GAVEL — протокол на основе LLM, который сравнивает две извлеченные клинические хронологии с исходным клиническим отчетом и возвращает для каждой разницы тип несоответствия, вердикт и фрагмент отчета.
- В работе оценивают сопоставитель событий и анализируют 2 738 выводов от GPT5.6sol и DeepSeek V3.2, ранжируют шесть извлекателей на базе LLM и двух человеческих аннотаторов, а также тестируют слияние под управлением GAVEL: по 126 отчетам объединенные хронологии предпочитали в 77,0% сравнений, несоответствия, приписываемые проверяемой хронологии, сократились с 7.63 до 0.85 на отчет; ручная проверка подтвердила 89.4% и 88.6% выводов, истинные показатели совпадения составили 60% сразу ниже и 48% сразу выше порога 0.10.
- GAVEL предлагает метод на базе LLM для вынесения вердикта и слияния клинических хронологий без признания какой‑либо хронологии эталоном, что может улучшить практики оценки и объединения в исследованиях извлечения клинической информации.
ПОЧЕМУ ЭТО ВАЖНО
GAVEL предлагает метод на базе LLM для вынесения вердикта и слияния клинических хронологий без признания какой‑либо хронологии эталоном, что может улучшить практики оценки и объединения в исследованиях извлечения клинической информации.