ИССЛЕДОВАНИЕ · RESEARCH · #2566
Обнаружение покровительного и снисходительного языка на английском и мандаринском (arXiv:2610.31808v1)
Новый препринт на arXiv (arXiv:2610.31808v1) предлагает автоматическое обнаружение покровительного и снисходительного языка (PCL) на английском и мандаринском. В работе сравнивают CNN на статичных векторных представлениях слов и дообученный BERT; BERT показал F1 = 0.528 на валидационном наборе.
КЛЮЧЕВЫЕ ТЕЗИСЫ
- Новый препринт на arXiv (arXiv:2610.31808v1) предлагает автоматическое обнаружение покровительного и снисходительного языка (PCL) на английском и мандаринском.
- В работе сравнивают CNN на статичных векторных представлениях слов и дообученный BERT; BERT показал F1 = 0.528 на валидационном наборе.
- Обнаружение PCL важно для модерации и исследований предвзятости, так как это тонкая форма вредоносной речи; препринт показывает, что трансформеры помогают, но умеренное значение F1 указывает на сохранение сложности задачи.
ПОЧЕМУ ЭТО ВАЖНО
Обнаружение PCL важно для модерации и исследований предвзятости, так как это тонкая форма вредоносной речи; препринт показывает, что трансформеры помогают, но умеренное значение F1 указывает на сохранение сложности задачи.