Der Prozess der Untersuchung einzelner Prüfungsitems anhand statistischer und qualitativer Qualitätsindikatoren — wie Schwierigkeit, Trennschärfe, Distraktorwirkung und Inhaltsübereinstimmung — zur Informierung von Itemauswahl, Überarbeitung und Bewertungsentscheidungen.

Prinzip

Kombiniere quantitative Indizes und qualitative Überprüfung, um zu beurteilen, ob jedes Item das intendierte Konstrukt zuverlässig und fair für die Zielpopulation misst.

Demonstration

Nach einem Pilottest berechnen Psychometriker Item-p-Werte (Anteil korrekt), punkt-biseriale Korrelationen zur Trennschärfe, untersuchen Distraktorhäufigkeiten und prüfen Itemformulierungen auf Mehrdeutigkeit, um zu entscheiden, welche Items überarbeitet oder aussortiert werden.

Fehlanwendung

Items ausschließlich zu entfernen, weil sie extreme Schwierigkeitswerte aufweisen, ohne Inhaltsübereinstimmung, Instabilität bei kleinen Stichproben oder Leistungsunterschiede zwischen Subgruppen zu prüfen, die auf Bias hindeuten könnten.

Konsequenz

Systematische Itemanalyse verbessert Testzuverlässigkeit, Validität und Fairness, indem fehlerhafte Items identifiziert, die Inhaltsabdeckung gestärkt und Itembanken sowie Kalibrierung informiert werden.

Umkehrung

Nur Gesamttestergebnisse für Entscheidungen heranzuziehen und zu ignorieren, welche Items die Leistung treiben, wodurch spezifische Inhaltsmängel oder Bias auf Itemebene übersehen werden.

Abgrenzung

Konzentriert sich auf Item‑Ebene; sie ergänzt, ersetzt aber nicht weitergehende Validierungsaktivitäten wie Curriculums‑Ausrichtungsstudien, Überprüfungen folgender Validität oder groß angelegte Normierungsverfahren.

Semantische Spannung

Wird oft mit testebenen Psychometrik verwechselt: Itemanalyse ist mikro‑level (Items und Distraktoren), während testebene Analyse sich auf Score‑Zuverlässigkeit, Informationsfunktionen und Populationseigenschaften konzentriert.

Synthese

Itemanalyse integriert numerische Statistiken und Inhaltsprüfung, um die Qualität und Eignung eines Items zu bestimmen und umsetzbare Empfehlungen für Überarbeitung, Beibehaltung oder Entfernung zu liefern.