ИССЛЕДОВАНИЕ · RESEARCH · #2880
FilingLoop: интерактивный бенчмарк и самоэволюционирующая система агентов-LLM для проверки раскрытий SEC (arXiv v1)
FilingLoop — интерактивный бенчмарк и рамочная система самоэволюции агентов для проверки и правки корпоративных раскрытий, основанная на исторической переписке SEC. Работа воссоздаёт 380 задач проверки, в основном по IPO, от 96 компаний, оценивает финальные документы по 6 099 требованиям и показывает, что процедурная эволюция (без изменения весов моделей) повышает выполнение требований с 24,28% до 27,96% и полное устранение замечаний с 16,90% до 20,75% при росте общих затрат на 5,8% по сравнению с фиксированной политикой.
КЛЮЧЕВЫЕ ТЕЗИСЫ
- FilingLoop — интерактивный бенчмарк и рамочная система самоэволюции агентов для проверки и правки корпоративных раскрытий, основанная на исторической переписке SEC.
- Работа воссоздаёт 380 задач проверки, в основном по IPO, от 96 компаний, оценивает финальные документы по 6 099 требованиям и показывает, что процедурная эволюция (без изменения весов моделей) повышает выполнение требований с 24,28% до 27,96% и полное устранение замечаний с 16,90% до 20,75% при росте общих затрат на 5,8% по сравнению с фиксированной политикой.
- Это даёт целевой и основанный на данных бенчмарк и метод процедурной адаптации для агентов-LLM в задачах финансовых раскрытий с высокими ставками, где важно выявление недостающих фактов и проверка доказательств.
ПОЧЕМУ ЭТО ВАЖНО
Это даёт целевой и основанный на данных бенчмарк и метод процедурной адаптации для агентов-LLM в задачах финансовых раскрытий с высокими ставками, где важно выявление недостающих фактов и проверка доказательств.