РЕГУЛИРОВАНИЕ · MODELS · #2911
Исследование Vals AI: у китайских моделей разная «про‑китайская» направленность; язык и подсказки меняют ответы
Vals AI протестировала десятки китайских, американских и других моделей на сотнях политически чувствительных вопросов и обнаружила, что согласие с официальными позициями Китая сильно варьируется по модели, языку, формулировке подсказки и формату ответа, а не является однородным. В качестве примеров: GLM‑5.3 Flash признал документированные нарушения прав человека, Qwen3.8 Max в упрощённом китайском обозначил «Taiwan» как «Taiwan, China», а Thomson 1.0 Small (тонкая настройка Qwen3.6 35B от Thomson Reuters) снизил долю про‑правительственных ответов с 84.6% до 15.0%; Vals также заметила, что некоторые зарубежные модели порой принимают официальные китайские позиции, и напомнила, что отказы по умолчанию считались нейтральными, а часть тестов шла через сторонние провайдеры.
КЛЮЧЕВЫЕ ТЕЗИСЫ
- Vals AI протестировала десятки китайских, американских и других моделей на сотнях политически чувствительных вопросов и обнаружила, что согласие с официальными позициями Китая сильно варьируется по модели, языку, формулировке подсказки и формату ответа, а не является однородным.
- В качестве примеров: GLM‑5.3 Flash признал документированные нарушения прав человека, Qwen3.8 Max в упрощённом китайском обозначил «Taiwan» как «Taiwan, China», а Thomson 1.0 Small (тонкая настройка Qwen3.6 35B от Thomson Reuters) снизил долю про‑правительственных ответов с 84.6% до 15.0%; Vals также заметила, что некоторые зарубежные модели порой принимают официальные китайские позиции, и напомнила, что отказы по умолчанию считались нейтральными, а часть тестов шла через сторонние провайдеры.
- Это важно, потому что язык, подсказки и тонкая настройка способны существенно изменить политическую направленность моделей, влияя на доверие, модерацию, геополитические риски и оценку моделей в разных юрисдикциях.
ПОЧЕМУ ЭТО ВАЖНО
Это важно, потому что язык, подсказки и тонкая настройка способны существенно изменить политическую направленность моделей, влияя на доверие, модерацию, геополитические риски и оценку моделей в разных юрисдикциях.