Безопасность как ограничение: дополнительная настройка LLM-рекомендателя для пояснений
Предпечатная статья на arXiv описывает дообучение LLM-рекомендателя для генерации персонализированных, правдоподобных и строго безвредных объяснений рекомендаций видео с помощью двух LLM-судей и метода обучения constrained GRPO. На отложенной реальной выборке дообученная модель повышает долю PASS по всем трём критериям с 0.649 до 0.956 по авторам и с 0.677 до 0.931 по независимой оценке; при этом фронтирный генератор показывает результат, сопоставимый с нетренированным базовым рекомендационным методом, а способность к рекомендациям и языковым навыкам не ухудшается.