Daten und Studien zu „Schlagwörter: Interrater-Reliabilität” (1)

1
Ziel des Projekts war die Prüfung der Niveaubeschreibungen DaZ (Deutsch als Zweitsprache) für die Sekundarstufe auf Einhaltung der Gütekriterien Validität, interne Konsistenz, Interraterreliabilität und Beobachtungsgenauigkeit. Zur Feststellung der Validität wurde im Rahmen des Projekts die Korrelation der Beobachtungsergebnisse von 121 Schülerinnen und Schülern aus 14 verschiedenen Schulen bzw. DaZ-Zentren in Sachsen und Schleswig-Holstein mit einem äußeren Kriteriumswert geprüft (äußere Kriter ... Ziel des Projekts war die Prüfung der Niveaubeschreibungen DaZ (Deutsch als Zweitsprache) für die Sekundarstufe auf Einhaltung der Gütekriterien Validität, interne Konsistenz, Interraterreliabilität und Beobachtungsgenauigkeit. Zur Feststellung der Validität wurde im Rahmen des Projekts die Korrelation der Beobachtungsergebnisse von 121 Schülerinnen und Schülern aus 14 verschiedenen Schulen bzw. DaZ-Zentren in Sachsen und Schleswig-Holstein mit einem äußeren Kriteriumswert geprüft (äußere Kriteriumsvalidität). Für die Prüfung der internen Konsistenz wurde dieselbe Stichprobe herangezogen. In der Prüfung der Beobachterübereinstimmung und Beobachtergenauigkeit wurde mit aus Videomaterial und Textmaterial bestehenden Portraits von Schülern unterschiedlicher Aneignungsstände im Deutschen gearbeitet, wobei das gesamte Kompetenzspektrum der Niveaubeschreibungen abgedeckt wurde. Die Videoportraits wurden aus 26 Unterrichtsstunden Videomitschnitt herausgearbeitet; die Portraits wurden von insgesamt 52 Lehrkräften aus vier Landkreisen in Sachsen und Schleswig-Holstein mit den Niveaubeschreibungen geratet. Die Ergebnisse (...) bescheinigen dem Instrument hinreichende Validität sowie hervorragende interne Konsistenz. Im Hinblick auf Interraterreliabilität und Genauigkeit der Beobachtungsergebnisse zeigte sich jedoch Optimierungsbedarf: Beide sind nicht durchgehend zufriedenstellend und verdeutlichen die Notwendigkeit von Entwicklung und Einsatz einer linguistische Kenntnisse und analytische Fähigkeiten vermittelnden Beobachterschulung. Darüber hinaus ist der Bedarf an kleinen Ergänzungen der Deskriptoren deutlich geworden. (DIPF/Projektträger)
Feedback