ИССЛЕДОВАНИЕ · RESEARCH · #1244
GeoOutageBench: бенчмарк для мультимодального геопространственно-временного KGQA с учётом неоднозначности
GeoOutageBench (arXiv:2609.36082v1) — новый бенчмарк и набор данных для оценки LLM-ориентированного геопространственно-временного KGQA на мультимодальном графе знаний, объединяющем записи о сбоях, дистанционное зондирование, данные о погоде, штормовых и электросетевых событиях, географические сущности и онтологии. Он включает таксономию типов запросов (включение/близость, со-наличие, мультимодальные доказательства, гипотетические оценки) и позволяет конфигурируемо оценивать перевод NL→SPARQL, полезность онтологий и точность мультимодального извлечения; код и данные размещены на GitHub.
КЛЮЧЕВЫЕ ТЕЗИСЫ
- GeoOutageBench (arXiv:2609.36082v1) — новый бенчмарк и набор данных для оценки LLM-ориентированного геопространственно-временного KGQA на мультимодальном графе знаний, объединяющем записи о сбоях, дистанционное зондирование, данные о погоде, штормовых и электросетевых событиях, географические сущности и онтологии.
- Он включает таксономию типов запросов (включение/близость, со-наличие, мультимодальные доказательства, гипотетические оценки) и позволяет конфигурируемо оценивать перевод NL→SPARQL, полезность онтологий и точность мультимодального извлечения; код и данные размещены на GitHub.
- Бенчмарк даёт сфокусированный инструмент для проверки LLM–KG систем на неоднозначных мультимодальных геопространственно-временных запросах, важных для анализа отказов инфраструктуры и устойчивости, что является малоисследованной, но практичной областью.
ПОЧЕМУ ЭТО ВАЖНО
Бенчмарк даёт сфокусированный инструмент для проверки LLM–KG систем на неоднозначных мультимодальных геопространственно-временных запросах, важных для анализа отказов инфраструктуры и устойчивости, что является малоисследованной, но практичной областью.