MMLU & MMLU-Pro
The default knowledge exam of 2020–24 — now saturated.
Vous consultez une fiche benchmark : un test utilisé par l'industrie pour mesurer des chips ou des modèles — et ce qu'il révèle concrètement.
MMLU's 57-subject multiple-choice exam was the standard capability score from GPT-3 (43.9%) to the high-80s frontier plateau; MMLU-Pro hardened it as scores saturated. Its arc is the pattern every benchmark follows: introduced, climbed, saturated, replaced.
Comment cela s'articule avec le reste de la chaîne
Les liens de cette fiche en un coup d'œil — cliquez sur un groupe pour y accéder directement.
Connexes
Sources
Fiche examinée au 2026-01-15 — voir Méthodologie.