← Glossaire Terme
IFEval
Un benchmark qui teste si un modèle suit des instructions claires et vérifiables.
IFEval donne un modèle d’instructions qui peuvent être vérifiées automatiquement, telles que « écrire moins de 100 mots » ou « inclure le mot bleu deux fois ». Le score est la part d’instructions qu’il suit.
Il s’agit d’un test étroit d’obéissance au format et aux règles, et non de l’intelligence ou de l’utilité globale du modèle.
Mentionné dans