НОВОСТЬ · RESEARCH · #345
ANIMASK: анализ вклада модели и персоны в смоделированных сюжетных мирах
В статье представлена ANIMASK — фреймворк, который «замораживает» книги и сценарии в сюжетные миры и воспроизводит их с точки заморозки, сравнивая действия персонажей с учётом и без учёта заданной персоны. На 40 историях, 6 моделях-«актёрах» и 3 846 точках решений авторы обнаружили, что воспроизведения отклоняются от канонов в сторону более плоских, холодных исходов, при этом персоны остаются заметными, а поведение модели по умолчанию обычно более осторожно, чем поведение персоны.
КЛЮЧЕВЫЕ ТЕЗИСЫ
- В статье представлена ANIMASK — фреймворк, который «замораживает» книги и сценарии в сюжетные миры и воспроизводит их с точки заморозки, сравнивая действия персонажей с учётом и без учёта заданной персоны.
- На 40 историях, 6 моделях-«актёрах» и 3 846 точках решений авторы обнаружили, что воспроизведения отклоняются от канонов в сторону более плоских, холодных исходов, при этом персоны остаются заметными, а поведение модели по умолчанию обычно более осторожно, чем поведение персоны.
- Это помогает разделить эффекты инструкций-персон и внутренних по умолчанию поведения модели, что важно для управления и оценки ролевого поведения в больших языковых моделях.
ПОЧЕМУ ЭТО ВАЖНО
Это помогает разделить эффекты инструкций-персон и внутренних по умолчанию поведения модели, что важно для управления и оценки ролевого поведения в больших языковых моделях.