Le processus d'examen des éléments d'évaluation individuels selon des indicateurs statistiques et qualitatifs de qualité — tels que la difficulté, la discrimination, le fonctionnement des distracteurs et l'alignement — pour informer la sélection, la révision et les décisions de notation.

Principe

Combiner des indices quantitatifs et une revue qualitative pour juger si chaque item mesure de manière fiable et équitable le construit visé pour la population cible.

Démonstration

Après un test pilote, des psychométriciens calculent des p-values d'item (proportion correcte), des corrélations point-bisériales pour la discrimination, examinent les fréquences de choix des distracteurs et révisent les énoncés pour ambiguïté afin de décider quels items réviser ou retirer.

Mauvaise application

Éliminer des items uniquement parce qu'ils présentent des valeurs de difficulté extrêmes sans vérifier l'alignement au contenu, l'instabilité due à un petit échantillon ou les performances par sous-groupes susceptibles de révéler des biais.

Conséquence

Une analyse systématique des items améliore la fidélité, la validité et l'équité du test en identifiant les items défectueux, en renforçant la couverture de contenu et en informant la banque d'items et l'étalonnage.

Inversion

Accepter uniquement les scores totaux du test pour prendre des décisions et ignorer quels items expliquent la performance, manquant ainsi des faiblesses de contenu spécifiques ou des biais au niveau des items.

Limite

Axée sur les preuves au niveau des items; elle complète mais ne remplace pas des activités de validation plus larges telles que les études d'alignement curriculaire, les examens de validité conséquentiale ou la détermination de normes à grande échelle.

Tension sémantique

Souvent confondue avec la psychométrie au niveau du test : l'analyse d'item est micro (items et distracteurs), alors que l'analyse au niveau du test porte sur la fidélité des scores, les courbes d'information et les propriétés des scores au niveau de la population.

Synthèse

L'analyse d'item intègre statistiques numériques et revue du contenu pour déterminer la qualité et l'aptitude d'un item, produisant des recommandations exploitables pour la révision, la conservation ou le retrait.