Tech Meridian ← К СУЩНОСТЯМ
PROМОЙ MERIDIAN EN

ТЕМА · ENTITY #25146

GRACE benchmark

Хронология связанных событий, источники и контекст из новостной базы.

ХРОНОЛОГИЯ СОБЫТИЙ

1

RESEARCH · 1 ИСТОЧН. · arXiv cs.AI

«Не выбирайте победителя» (arXiv:2610.36169v1) — приоритеты лучше фиксированных правил для конфликтов RAG

Авторы дают решение в терминах теории решений и показывают на экспериментах, что фиксированные правила разрешения расхождений между контекстом из поиска и моделью обычно уступают: для решения конфликта нужны отдельные доказательства в пользу каждого источника и априорная вероятность корректности контекста. На бенчмарке GRACE они реализуют заметки с откалиброванной уверенностью, «двухголосого» читателя и селектор с априорой π; при π, равной доле правильных контекстов, общие показатели поднимаются до 45.3 (Qwen3.5-35B-A3B) и 35.0 (Llama-3.1-8B) против лучших базовых 29.4 и 27.5, превосходя CK-PLUG и TCR на preregistered ClashEval на 12 и 26 пунктов, при этом выгоды исчезают, когда модель не знает ответа.

7.0