FigAct и FigAct-8B превращают научные рисунки в интерактивные обоснованные объяснения (arXiv:2609.36190v1)
В статье представлена FigAct — фреймворк, который превращает статические научные рисунки в визуальные презентации, реагирующие на вопросы, выполняя действия над графическими элементами; он генерирует короткие озвучки, привязанные к визуальным доказательствам, использует визуальные действия для фокусировки внимания и иерархическую стратегию поиска, которая, по заявлению авторов, сокращает использование токенов примерно в 40 раз. Авторы обучили FigAct-8B с тремя специализированными наградами (точность привязки, эффективность поиска, качество рендера) и собрали проверенный людьми бенчмарк для оценки объяснений на реальных фигурах.