Тестирование подписей: оценка качества видеоподписей через тесты с вариантами ответов
В работе предлагается переопределить качество видеоподписей через призму информационной полноты и оценивать подписи с помощью тестов с вариантами ответов (MCQA), вместо простого сравнения с эталонными текстами. Метод призван учесть «многие-один» характер описаний видео и дать более детальную, ориентированную на содержимое оценку подписей для визуальных больших языковых моделей (VLLM).