Inhalt

Schüler- und Lehrkräftebeurteilungen gelten als belastbare Datenquelle in der Unterrichtsforschung. Lenske (2016) weist jedoch nach, dass Grundschüler*innen Fragebogenitems zu Unterrichtsqualität – u. a. zu Aktivierung – häufig nicht im intendierten Sinne bearbeiten. Dieser Befund verdeutlicht die Notwendigkeit eines expliziten Nachweises der Inhaltsvalidität in der Fragebogenkonstruktion. Für die Inhaltsvalidität von
Lehrkräfteurteilen zu Unterrichtsqualität liegen bislang keine Befunde vor. Der Beitrag präsentiert Ergebnisse einer qualitativen Studie zur Sicherung der Inhaltsvalidität neukonstruierter Items zur fachspezifischen Erfassung kognitiver Aktivierung im Englischunterricht der Grundschule. In kognitiven Interviews wurden neun Englischlehrerinnen und 39 Grundschüler*innen der Klasse 4 zu Fragebogenitems befragt und die Interviewtranskripte mittels strukturierender qualitativer Inhaltsanalyse ausgewertet. Damit repliziert die Studie den Ansatz von Lenske (2016) für das Fach Englisch und ergänzt ihn um die Gruppe der Lehrkräfte. Die Ergebnisse belegen, dass die Mehrheit der Items in beiden Probandengruppen nicht im intendierten Sinn bearbeitet wurde. Davon ausgehend werden Strategien zur Sicherung der Inhaltsvalidität formuliert.

Schlagwörter: Fragebogenentwicklung – kognitive Aktivierung – kognitives Interview – Unterrichtsqualität

Student and teacher feedback on instructional quality is considered a tried and tested source of data. However, Lenske (2016) demonstrates that students at primary level often fail at understanding and interpreting questionnaire items on instructional quality – student activation, in particular – as intended. These findings emphasize the need for explicitly addressing issues of content validity in student questionnaires. Studies on
the content validity of teacher ratings of instructional quality have not been conducted yet. This paper presents a qualitative study investigating the content validity of newly constructed items on cognitive activation in English language teaching at primary level. Cognitive interviews were conducted with nine primary English language teachers and 39 fourth year students to explore how they process questionnaire items on cognitive
activation. The interview data was analyzed using qualitative content analysis. Thus, the study replicates Lenske’s (2016) approach and adapts it to teachers as a new target group. The findings show that both groups of participants misinterpreted more than half of the items each. Building on these findings, the paper suggests strategies for ensuring the content validity of items.

Keywords: cognitive activation – cognitive interviewing – instructional quality – questionnaire design