Von Silvia Montoya, Direktorin des UNESCO-Instituts für Statistik
In den letzten Monaten wurde viel über den globalen SDG-Indikator 4.1.1a zu Lernergebnissen in frühen Klassenstufen diskutiert. Da nur wenige Länder in der Lage waren, darüber zu berichten, ist seine Zukunft vor der bevorstehenden umfassenden Überprüfung der SDG-Indikatoren gefährdet. Wir haben es kürzlich in einem erklärt Blog, die technischen Gründe, die den Konsens verzögert haben, und wie wir daran arbeiten, diese zu überwinden. Dieser Blog versucht, den Grundriss einer nachhaltigen Lösung zu skizzieren.
Ein Argument, das in den letzten Tagen geäußert wurde, ist, dass das Perfekte nicht der Feind des Guten sein sollte. Ein „guter“ Indikator muss verlässliche, vergleichbare Informationen über Lernergebnisniveaus und -trends liefern – und auf Informationsblöcken basieren, die als Leitfaden für Politik und Planung dienen können.
Damit die Daten des Indikators 4.1.1a vertrauenswürdig sind, sind folgende Eingaben erforderlich:
- Welcher Inhalt, bzw DomänenGehört es dazu, eine Bewertung mit anderen vergleichbar zu machen?
- Was ist das Minimum? Standards pro Domain und wie sollten die Leistungen in den einzelnen Bereichen aggregiert werden, um eine Schätzung des Anteils der Schüler zu ermöglichen, die das Mindestkompetenzniveau erreichen?
- Welche Datenerfassung Verfahren Qualität sicherstellen?
Für die Berichterstattung zum Indikator 4.1.1a machen verschiedene länderübergreifende und nationale Bewertungen Anwärter auf sich. Dennoch wurden Bewertungsinstrumente so konzipiert, dass sie in verschiedenen Bildungskontexten unterschiedliche Ziele verfolgen, wobei die globale Vergleichbarkeit nicht unbedingt ein solches Ziel darstellt.
Länderübergreifende Beurteilungen sind möglicherweise nicht einmal auf Vergleichbarkeit ausgelegt – und selbst wenn sie vergleichbar sind, messen sie in der Regel nicht das Mindestkompetenzniveau von SDG 4. Im Jahr 2018 gab es einen Konsens darüber, für die Berichterstattung eine ihrer eigenen Kompetenzniveaudefinitionen als Proxy für das globale Mindestkompetenzniveau zu verwenden. Länderübergreifende Beurteilungen stimmen nicht unbedingt mit den nationalen Lehrplänen überein, insbesondere im Fall von Ländern, die das Beurteilungsprogramm überhaupt nicht eingeführt haben.
Nationale Bewertungen können möglicherweise als Grundlage für die Berichterstattung verwendet werden, sofern weitere Arbeiten zur Angleichung an das Mindestkompetenzniveau und zur Sicherstellung der Qualität des Bewertungsverfahrens durchgeführt werden. Ein hybrider Ansatz besteht darin, in eine nationale Bewertung genügend Fragen einzubeziehen, die darauf ausgelegt sind, das globale Mindestkompetenzniveau zu messen. Dieser Weg wäre nachhaltig, da er die nationalen Autoritäten und Prioritäten respektiert, auf lokale Kontexte ausgerichtet ist und Beweise in Bezug auf den nationalen Lehrplan, die Pädagogik und die Politik liefern kann. Es geht auch auf Bedenken im Zusammenhang mit Inhalten und Verfahrenskapazitäten ein, baut lokale Kapazitäten für die Entwicklung, Analyse und Berichterstattung von Bewertungen auf und stellt gleichzeitig die Einhaltung des Mindestkompetenzniveaus sicher.
Berichterstattung über die Leistungen in den unteren Grundschulklassen: die Themen
Die Messung im unteren Primarbereich (im Vergleich zum Ende des Primarbereichs und am Ende des unteren Sekundarbereichs) bringt mindestens zwei zusätzliche Arten technischer Komplexität mit sich:
- Aufgrund des jungen Alters der Kinder haben sich zwei unterschiedliche Arten der Durchführung der Beurteilung herausgebildet: die Beurteilung durch ein einzelnes Kind oder die Beurteilung in der Gruppe im Klassenzimmer.
- Da das Lehren und Lernen in der Muttersprache häufiger vorkommt, ist es wahrscheinlicher, dass Beurteilungen in mehreren Sprachen durchgeführt werden, was die Entwicklung von Parametern in diesen Sprachen erfordert, um die Vergleichbarkeit sicherzustellen.
Wie immer gibt es Vor- und Nachteile bei der Art der Bewertung. Die kontextgerechte Wahl sollte eine Länderentscheidung sein. Die Herausforderung besteht darin, beide Bewertungsarten in der Berichterstattung unterzubringen und vergleichbar zu machen.
Von Gruppen durchgeführte Tests sind kostengünstiger und eignen sich in manchen Kontexten als Leitfaden für die politische Entscheidungsfindung, wenn die meisten Kinder das Mindestkompetenzniveau erreichen oder darüber liegen. Allerdings ermöglichen sie keine Identifizierung von Problemen auf der eher grundlegenden Ebene und könnten daher für die Politik in Landkreisen, in denen es den meisten Kindern an Vorkenntnissen mangelt, weniger nützlich sein.
Betrachten Sie zur Veranschaulichung die Mindestanforderungen an das Kompetenzniveau für die Meldung von Indikator 4.1.1a. Ein Test, der 20 Elemente des Leseverständnisses verwendet (was das wünschenswerte Ergebnis ist und es Kindern ermöglicht, von der Phase „Lesen lernen“ zur Phase „Lesen lernen“ zu gelangen), eignet sich zur Meldung von Indikator 4.1.1a. Ebenso wäre eine Bewertung, die die endgültigen Ergebnisse zuverlässig identifiziert, indem sie 10 Leseverständnis-Items und die 10 Items zu Vorläuferfähigkeiten des Lesens (mündliches Sprachverständnis und Dekodierung) einbezieht, ebenfalls für die Berichterstattung geeignet. Auch die Wahl der Teilnahme am gesamten Kompetenzspektrum liegt im Ermessen eines Landes im Rahmen einer nationalen Messstrategie und unter Berücksichtigung seines Kontexts.
Auspacken des Mindestkompetenzniveaus für den SDG-Indikator 4.1.1a – Lesen
In der Praxis stehen den Ländern verschiedene Bewertungsansätze für die unteren Grundschulklassen zur Auswahl. Einige messen ein eher grundlegendes Niveau (Bewertung 1) und können daher nicht auf dem Mindestniveau der Kompetenzen Bericht erstatten, können dies jedoch auf dem Niveau der grundlegenden Fertigkeiten tun. Andere messen teilweise die ultimative Fähigkeit, dh das Leseverständnis (Bewertungen 2 und 3). Wieder andere (Bewertungen 4 und 5) messen nur das Mindestkompetenzniveau und Fertigkeiten höherer Ordnung.
Festlegung globaler Standards für verschiedene Bewertungen
Die offene Frage wäre, wie in die Berichterstattung Beurteilungen einbezogen werden können, die nicht zuverlässig das Endergebnis (Leseverständnis), sondern grundlegende und/oder Vorläuferfähigkeiten testen.
Berichterstattung über die Leistungen in den unteren Grundschulklassen: eine Lösung
Angesichts dieser Alternativszenarien und um zwei Ziele zu erreichen (Berichterstattung und Anleitung zur Verbesserung der Bewertungsinstrumente), schlägt die UIS ein Berichtsschema vor, das auf der Aufschlüsselung oder „Aufschlüsselung“ der Berichterstattung über das Mindestkompetenzniveau nach Fertigkeit oder Teilkompetenz beruht und diese ermöglicht Teilberichterstattung, wenn die Bewertung nicht das Mindestkompetenzniveau misst.
Das Auspacken der Berichterstattung hat mehrere Vorteile. Insbesondere würde es:
- bestehende Tools berücksichtigen, sofern sie verfahrenstechnische Qualitätskriterien erfüllen;
- ermöglichen die Messung des Mindestkompetenzniveaus mithilfe von Beurteilungen, die eine unterschiedliche Testzusammensetzung und sogar eine unterschiedliche Art der Durchführung aufweisen; Und
- erleichtern die Definition der gewünschten Standards.
Dieser letzte Punkt erinnert uns daran, dass mehr Aufwand erforderlich ist, da mehrere Standards für jede Fertigkeit/Unterfertigkeit und Sprache definiert werden müssen.
Unter Bezugnahme auf das Beispiel mit fünf Bewertungsprogrammen in der Abbildung oben zeigt diese Tabelle, wie die Berichterstattung zum Lesen aussehen würde, sobald die zusätzliche Arbeit an Standards abgeschlossen ist. Es wäre möglich, dass einige Bewertungsprogramme Grundlagen- und/oder Vorkenntnisse (jedoch nicht das Mindestkompetenzniveau) melden, wenn das Programm dieses Niveau derzeit nicht abdeckt.
Aufschlüsselung der Berichterstattung nach Fähigkeiten für SDG-Indikator 4.1.1a – Lesen
Was wären die letzten Schritte?
In den kommenden drei Monaten müssten einige Schritte durchgeführt werden, um die Definition der Zulassungskriterien abzuschließen:
- Definieren Sie die minimal akzeptablen technischen Parameter, um verschiedene Fähigkeiten zu kombinieren, die für das Mindestkompetenzniveau gemeldet werden sollen.
- Legen Sie die Standards für jede Vorläuferfähigkeit nach Sprache oder Sprachgruppe fest.
- Entwickeln Sie eine Aggregations- oder Bewertungsmethode, um Berichte zum Mindestkompetenzniveau zu erstellen – und bei Bedarf auch für Teilkompetenzen (z. B. Grundkompetenzen).
Sobald diese Eingaben abgeschlossen sind, wird erwartet, dass die Berichterstattung durch nationale und internationale Bewertungsprogramme ausgeweitet wird. Diese Entwicklung würde Möglichkeiten für die Berichterstattung auch über nationale Bewertungsprogramme eröffnen und die Entscheidungen der Länder unterstützen. Es würde auch ermöglichen, Entscheidungen über die gewünschte Frequenz zu treffen, die für die Politik nützlich und sinnvoll wäre. Es wird erwartet, dass auch die Berichterstattung über Mathematik dem gleichen Verfahren folgt.
