Criteria for analyzing a test measuring learning progress

Lernverlaufsdiagnostik spielt in pädagogischen Kontexten eine weit wichtigere Rolle als bloße Statusdiagnostik. Tests, mit denen die Veränderung eines Merkmals über einen bestimmten Zeitraum hinweg reliabel und valide gemessen werden kann, stellen hohe testtheoretische Anforderungen an das Material. Ziel des vorliegenden Beitrags ist es, Kriterien, die ein Test zur Lernverlaufsdiagnose erfüllen muss, vorzustellen und darüber hinaus eine Verfahrensweise der Testanalyse zu erarbeiten, an der diese Kriterien geprüft werden können. Im ersten Teil des Beitrages werden einige zentrale Voraussetzungen für ein solches Instrument diskutiert. Hierzu gehören die Reliabilität, Eindimensionalität, gleiche Schwierigkeiten der dargebotenen Materialien und hohe Testfairness. Im Anschluss daran wird eine Verfahrensweise vorgeschlagen, mittels deren diese Kriterien systematisch geprüft werden können. Die entwickelte Vorgehensweise wird am Beispiel eines neuen Instrumentes zur Erfassung des Sprachstandes von Schülerinnen und Schülern mit Beeinträchtigungen des Lernens demonstriert. Die auf der Klassischen Testtheorie sowie der Probabilistischen Testtheorie beruhenden Analysen zeigen, dass das Instrument (C-Test) eine hohe Reliabilität, Eindimensionalität und hohe Testfairness bezüglich des Geschlechts und der Muttersprache der Testteilnehmer besitzt. Außerdem kann mit Hilfe von erweiterten Raschmodellen aufgezeigt werden, dass sich die Einzelitems schwierigkeitskorrigiert zur Lernverlaufsdiagnostik einsetzen lassen. (DIPF/Orig.)Evaluating learning progress is a vital element of educational interventions for students with learning disabilities. Measuring change imposes considerably different requirements on test construction compared to traditional psychometric diagnostic instruments. The present paper discusses four theoretical challenges for test construction, namely a high reliability, unidimensionality, constant item difficulty, and high test fairness. A procedure is proposed for analyzing tests to fit these four criteria making use of item analyses, confirmatory factor analyses, Rasch modeling, and analyses of differential item functioning. The suggested procedure is exemplified on a newly developed test for measuring language proficiency of students with learning difficulties on the basis of c-tests. The results disclose c-tests as highly suitable for measuring differences in general language development. (DIPF/Orig.