Analyses effectuées
Les corrélations entre toutes les variables sont calculées en premier : sous-tests, appréciation de l'enseignant et tests de dépistage de 3e maternelle (GSM en France). Cette analyse met en évidence l'importance particulière de certains prérequis, notamment les manipulations de la chaîne numérique (compter entre deux bornes, compter à rebours, compter par pas). Elle a conduit à modifier, à partir de 2011, le mode de calcul du sous-test « Comptine » et la présentation du rapport final.
Vient ensuite la question des différences entre filles et garçons : se distinguent-ils en mathématiques, au test de dépistage et dans l'appréciation globale de l'enseignant ? Un seul score les distingue, la représentation des quantités, en faveur des garçons. Cette différence ne résiste pas à la correction pour comparaisons multiples.
La concordance entre le résultat global au test MathEval et l'appréciation de l'enseignant (validité externe) est étudiée ensuite. Rappelons que cette appréciation porte sur le niveau général de l'enfant, tel que l'enseignant le perçoit, et non sur son niveau en mathématiques. Selon l'indice statistique retenu, la validité externe du test va d'honorable à exceptionnelle : c'est l'occasion de rappeler la prudence nécessaire face aux statistiques. Cette validité pourra être réévaluée plus précisément un an plus tard, en comparant les résultats de 3M au niveau réellement atteint en mathématiques en fin de 1re primaire (CP). Une analyse longitudinale antérieure avait déjà montré que les résultats de 3M au test MathEval prédisaient très bien le niveau en 1P.
Un enfant classé faible, moyen ou fort à MathEval l'est-il de la même manière aux tests de dépistage de 3e maternelle ? La réponse dépend des critères de classement retenus. La validité externe du test expérimental de 3e maternelle est également analysée, sous deux angles : la correspondance entre sa note globale et l'appréciation de l'enseignant, et la capacité de ses sous-tests mathématiques à prédire le résultat total à MathEval.
La consistance (ou cohérence) interne du test MathEval est ensuite examinée, à travers trois questions. Les différents sous-tests mesurent-ils une même dimension ? Les items de chaque sous-test mesurent-ils, eux aussi, une dimension commune ? L'ensemble des items, quel que soit leur sous-test, est-il homogène ? La réponse est positive aux trois questions.
Les tables d'étalonnage viennent en dernier, sous deux formes : un étalonnage normalisé (moyenne 100, écart-type 15, comme les échelles de Wechsler) et des tables de fréquences cumulées.
