AIME
Un difficile concours américain de mathématiques pour lycéens, dont les problèmes servent désormais de référence pour évaluer le raisonnement des IA.
AIME signifie American Invitational Mathematics Examination. Ce concours s’adresse aux lycéens qui ont déjà réussi une première épreuve de qualification. Les problèmes sont véritablement difficiles, chaque réponse est un nombre entier compris entre 0 et 999 et aucun point partiel n’est accordé. Cette combinaison facilite la correction automatique, ce qui explique son adoption par les laboratoires d’IA.
Les scores AIME figurent désormais dans presque chaque lancement de modèle et ont progressé très vite : plusieurs modèles de 2026 annoncent plus de 99 %. Il faut les considérer avec prudence. Les problèmes étant publics et abondamment commentés en ligne, on craint toujours que les modèles les aient déjà vus pendant l’entraînement ; les laboratoires optimisent aussi expressément leurs systèmes pour les tests célèbres. Un score AIME élevé indique qu’un modèle excelle en mathématiques de concours. Il dit peu de choses sur sa capacité à restituer correctement un fait.