Stellwerktest Auswertung Kanton Luzern

Transkript

1 Stellwerktest 2018 Auswertung Kanton Luzern Start

2 Inhalt Kantonale Ergebnisse 2018 Mehrjahresvergleich nach Fach/Bereich Mehrjahresvergleich nach Niveau Was ist Stellwerk? Rücklauf Niveauverteilung Stellwerk 8 Jahresvergleich Streuung der Schulen

3 Was ist Stellwerk? Stellwerk (Link) ist ein multimediales, adaptives Testsystem, das vom Institut für Bildungsevaluation Zürich konzipiert wurde und vom Lehrmittelverlag St. Gallen unter der Aufsicht einer Kommission betrieben und betreut wird. Es besteht aus Leistungstests, die sich an den Lehrplänen und Lehrmitteln der 8. und 9. Klasse orientieren. Stellwerk ist ein adaptives Testsystem, d.h. dass das Testsystem den Schwierigkeitsgrad der Testfragen ausgehend von den gegebenen Antworten einer/eines Lernenden jeweils neu einschätzt. Nach dem Lösen mehrerer Aufgaben in einem Test pendelt sich die messbare Leistung des/der Getesteten bei einer Punktezahl ein (siehe Grafik). Verlauf und Dauer des Tests hängen somit vom Antwortverhalten der Lernenden ab (Erfahrungswert: Minuten pro Test). weiter

4 Was ist Stellwerk? Aufgaben und ihre Schwierigkeitsgrade Jede Aufgabe ist einem Leistungsbereich (z.b. "Zahlen, Grössen, Operationen W1") zugeordnet. Links ist ein Beispiel für eine Aufgabe aus einem einfacheren Bereich von Stellwerk 8 (260 Punkte), rechts ein Beispiel für eine Aufgabe aus einem schwierigeren Bereich (800 Punkte) abgebildet. weiter

5 Was ist Stellwerk? Darstellung und Interpretation der Ergebnisse Die Testergebnisse werden auf einer normierten Skala von 200 bis 800 Punkten mit einem Mittelwert von 500 Punkten dargestellt (siehe Grafik). Die Normierung basiert auf den Ergebnissen der Lernenden der 8. und 9. Klassen des Kantons St. Gallen (Referenzpopulation), d.h. jedes individuelle Testergebnis wird in die Verteilung der Testergebnisse der St. Galler Lernenden eingeordnet. 2.5 Prozent der St. Galler Ergebnisse liegen bei weniger als 300 Punkten bzw. mehr als 700 Punkten, d.h. 95 Prozent der St. Galler Lernenden erzielten zwischen 300 und 700 Punkten. Rund 68 Prozent der Testergebnisse liegen zwischen 400 und 600 Punkten. weiter

6 Was ist Stellwerk? Referenzrahmen und Interpretationshilfe Den Testaufgaben von Stellwerk liegt ein Referenzrahmen mit Can-do-Formulierungen zugrunde, welcher sich wiederum auf eine Auswahl von Lernzielen aus den Lehrplänen der Deutschschweizer Kantone bezieht. Somit lassen die Testergebnisse Rückschlüsse auf die Kompetenzen der Lernenden zu. Die Interpretationshilfe veranschaulicht mithilfe von Kompetenzbeschreibungen und typischen Aufgabenbeispielen, was Lernende mit einem bestimmten Testergebnis wissen und können (siehe Tabelle). Kompetenz Erzielte Punkte Aufgabenbeispiel weiter

7 Was ist Stellwerk? Leistungsprofil Die Lernenden erhalten als Übersicht über ihre Ergebnisse ein Leistungsprofil, in welchem der Gesamtwert (rot) sowie die Werte der einzelnen Teilbereiche (dunkelgraue senkrechte Linie) pro Fach aufgeführt sind. Der Messfehler im Vertrauensbereich ist mit Farbflächen dargestellt (z.b. im Fach Mathematik der blaue Bereich). Das Leistungsprofil kann mit einem Berufsprofil (Link) abgeglichen werden. So wird ersichtlich, inwiefern die jetzigen Kompetenzen mit den Anforderungen eines Berufs übereinstimmen. weiter

8 Auswertung Kanton Luzern: Was wurde gemacht? Aus folgenden Gründen können die Ergebnisse dieser Auswertung leicht von früheren Daten abweichen: > In der kantonalen Auswertung wurden nur Ergebnisse von Tests berücksichtigt, die im vorgegebenen Zeitfenster absolviert wurden. Anders als bei früheren Auswertungen wurden die Daten also an einem feststehenden Stichtag (d.h. am Ende des vorgegebenen Zeitfensters) erhoben. Eine verspätete Dateneingabe führt somit nicht mehr zu stetigen Veränderungen kantonaler Werte. > Testergebnisse mit starken Ausreissern nach unten und oben (d.h. <0 und >1000 Punkte) wurden auf 0 bzw Punkte bereinigt. Dies betrifft 0.03% aller Tests. home

9 Rücklauf Anzahl Lernende per Stellwerk Mathematik Deutsch Französisch Englisch Vorstellung 1. September % 99.6% 91.1% 99.3% 98.9% % 97.7% 51.7% 89.0% 93.5% % 98.7% 89.3% 98.5% 99.9% % 98.0% 48.9% 88.8% 93.7% % 99.3% 89.7% 98.5% 99.2% % 98.7% 49.2% 88.1% 94.8% % 99.9% 90.8% 99.1% 100.0% % 97.7% 46.9% 87.3% 93.9% % 98.3% 89.4% 97.1% 97.0% % 89.3% 43.6% 81.2% 84.5% % 98.3% 89.5% 97.9% 98.2% % 93.9% 44.7% 84.7% 88.7% 3013 Lesehilfe Kommentar Home

10 Lesehilfe Rücklauf In der Tabelle wird die Anzahl der Lernenden in öffentlichen Regelschulen, die den Stellwerktest ausgefüllt haben, mit der Gesamtzahl der Lernenden im entsprechenden Schuljahr (Stand: 1. September) verglichen. Die in Privat- und Sonderschulen durchgeführten Tests werden in der Auswertung nicht berücksichtigt. Lernende mit einer Verfügung aufgrund einer geistigen Behinderung sind vom Test dispensiert. Dasselbe trifft auf Lernende zu, die von einem Fach dispensiert sind sowie Lernende, die das Wahlfach Französisch oder Englisch im 9. Schuljahr nicht besuchen. Sie müssen den Stellwerktest im entsprechenden Fach nicht machen; für alle anderen ist die Teilnahme verbindlich. Anzahl Lernende per Stellwerk Mathematik Deutsch Französisch Englisch Vorstellung 1. September % 98.5% 89.0% 98.3% 98.5% % 98.3% 51.1% 89.1% 91.3% % 99.6% 91.1% 99.3% 98.9% % 97.7% 51.7% 89.0% 93.5% % 98.7% 89.3% 98.5% 99.9% % 98.0% 48.9% 88.8% 93.7% % 99.3% 89.7% 98.5% 99.2% % 98.7% 49.2% 88.1% 94.8% % 99.9% 90.8% 99.1% 100.0% % 97.7% 46.9% 87.3% 93.9% % 98.3% 89.4% 97.1% 97.0% % 89.3% 43.6% 81.2% 84.5% 3197

11 Kommentar Rücklauf Die Rücklaufquote ist im Schuljahr 2017/2018 in allen Fächern im Vergleich zum Vorjahr angestiegen. Einigen Lernenden wurde durch die DVS die Bewilligung erteilt, den Stellwerktest in einzelnen resp. allen Fächern ausserhalb des offiziellen Zeitfensters durchzuführen. Die Tests, die ausserhalb der gesetzten Frist ausgefüllt wurden, werden in der Auswertung nicht berücksichtigt; nichtsdestotrotz haben alle Lernenden das Testergebnis in Form eines persönlichen Leistungsprofils erhalten. Im Vergleich mit dem Vorjahr ist insbesondere beim Stellwerk 9 eine Zunahme beim Rücklauf zu verzeichnen. So haben im Fach Mathematik 2018 rund 9 Prozent der Lernenden den Stellwerktest 9 nicht ausgefüllt, während es im Vorjahr rund 19 Prozent waren. Den Deutschtest im 9. Schuljahr haben rund 94 Prozent (+ 5% gegenüber 2017), den Englischtest rund 85 Prozent (+ 4%), den Französischtest rund 45 Prozent (+ 1%) und den Test zum Vorstellungsvermögen rund 89 Prozent (+ 5%) absolviert. Im Fach Französisch haben im 8. Schuljahr rund 10 Prozent nicht am Stellwerktest teilgenommen, was in etwa den Werten der Vorjahre entspricht. Im 9. Schuljahr wählen viele Lernende Französisch als Fremdsprachenfach ab, dementsprechend ist eine tiefere Rücklaufquote erwartungsgemäss.

12 Kantonale Ergebnisse 2018 Lesehilfe Kommentar Home

13 Lesehilfe kantonale Ergebnisse In der Graphik werden für jeden Prüfbereich von Stellwerk 8 und 9 die durchschnittlich erzielten Punkte des aktuellen Jahres dargestellt. Berücksichtigt wurden die Ergebnisse aller Lernenden (Regel-, Privat- und Sonderschulen).

14 Kommentar kantonale Ergebnisse 2018 Die Ergebnisse sind relativ konstant. In den Fächern Mathematik, Deutsch und Französisch liegt das durchschnittliche Testergebnis knapp unter dem Referenzwert von 500 Punkten. Im Fach Englisch und im Vorstellungsvermögen sind die Testergebnisse deutlich höher als der Referenzwert.

15 Mehrjahresvergleich nach Fach/Bereich Stellwerk 8 Stellwerk 9 Home

16 Mehrjahresvergleich nach Fach/Bereich: Stellwerk 8 Stellwerk 8 Stellwerk 9 Lesehilfe Kommentar Home

17 Mehrjahresvergleich nach Fach/Bereich: Stellwerk 9 Stellwerk 8 Stellwerk 9 Lesehilfe Kommentar Home

18 Lesehilfe Mehrjahresvergleich nach Fach/Bereich In den Graphiken ist pro Stellwerk die mehrjährige Entwicklung der durchschnittlich erzielten Punkte in den fünf Prüfbereichen dargestellt. Der Referenzwert liegt bei 500 Punkten. Berücksichtigt wurden die Ergebnisse aller Lernenden (Regel-, Privat- und Sonderschulen). Stellwerk 8 Stellwerk 9

19 Kommentar Mehrjahresvergleich nach Fach/Bereich Grundsätzlich bleiben die Stellwerkergebnisse über die Jahre hinweg relativ konstant. Augenfällig sind die beiden Anstiege im Englisch absolvierte der erste Jahrgang mit Englisch ab der dritten Primarklasse den Stellwerktest 8, ein Jahr später den Stellwerktest 9. Seither stagnieren die Ergebnisse in Englisch auf einem höheren Niveau, wobei im Jahr 2018 sowohl im 8. als auch im 9. Schuljahr der bisher höchste Wert erreicht wurde. Im Vorstellungsvermögen schneiden die Lernenden ebenfalls gut ab. In den Fächern Deutsch, Mathematik und Französisch liegen die Lernenden im 9. Schuljahr im Bereich des Referenzwerts (500 Punkte). Insgesamt leicht negativ haben sich in den letzten Jahren die Testergebnisse in den Fächern Deutsch und Mathematik entwickelt. Betroffen sind in Deutsch sämtliche getesteten Teilbereiche, wobei der Rückgang bei den Schreibfertigkeiten und bei der Sprachreflexion und Rechtschreibung deutlicher ausfällt. In Mathematik entwickeln sich die Punktewerte im Stellwerk 9 seit 2014 vor allem in den Niveaus B und C der Sekundarschule tendenziell rückläufig. Bei der Analyse wird ersichtlich, dass dies zu einem wesentlichen Teil auf die Algebra und die Arithmetik zuführen ist.

20 Mehrjahresvergleich nach Niveau Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Home

21 Mehrjahresvergleich nach Niveau: Mathematik Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Lesehilfe Kommentar Home

22 Mehrjahresvergleich nach Niveau: Deutsch Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Lesehilfe Kommentar Home

23 Mehrjahresvergleich nach Niveau: Französisch Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Lesehilfe Kommentar Home

24 Mehrjahresvergleich nach Niveau: Englisch Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Lesehilfe Kommentar Home

25 Mehrjahresvergleich nach Niveau: Vorstellungsvermögen Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Lesehilfe Kommentar Home

26 Lesehilfe Mehrjahresvergleich nach Niveau In den Graphiken ist pro Fach die mehrjährige Entwicklung der durchschnittlich erzielten Punkte dargestellt. Berücksichtigt wurden die Testergebnisse aller Lernenden (Regel-, Privatund Sonderschulen). Pro Niveau (unterschiedliche Farbe) ist die Entwicklung in den Ergebnissen der Stellwerke 8 und 9 mit unterschiedlicher Farbhelligkeit dargestellt. Seit 2016 existieren nur noch die drei Niveaus A, B und C; die noch verbliebenen D-Lernenden wechselten kontinuierlich ins Niveau C, weshalb seit 2016 das kantonale Ergebnis im Niveau C leicht tiefer ausfällt als in den Jahren zuvor. Weil die Anzahl von D-Lernenden bis zur Aufhebung des Niveaus im Jahr 2016 deutlich sank, ist die Leistungsentwicklung im Niveau D für die Jahre 2014 und 2015 nur schwer zu interpretieren.

27 Kommentar Mehrjahresvergleich nach Niveau In den einzelnen Niveaus wurden verschiedene durchschnittliche Punktzahlen erzielt, wobei im Durchschnitt die Lernenden im Niveau A am besten, jene im Niveau C am schlechtesten abschneiden. So erzielten beispielsweise im Mathematiktest 2018 die Lernenden im Niveau A im 9. Schuljahr durchschnittlich 587 Punkte, während jene im Niveau B 492 Punkte und jene im Niveau C 382 Punkte erreichten. Dies bedeutet allerdings nicht, dass alle Lernenden im Niveau A bessere Tests geschrieben haben als jene in den Niveaus B und C. Die Niveauverteilung des 8. Schuljahres ist zu finden unter: Niveauverteilung Stellwerk 8. Auffällig sind in den Mehrjahresvergleichen die tendenziellen Leistungsabnahmen im Fach Mathematik in den Niveaus B und C. Im aktuellen Schuljahr liegt das Niveau B in der 9. Klasse erstmals unter dem Referenzwert von 500 Punkten. Im Fach Deutsch sanken die Leistungen seit 2014 tendenziell in allen Niveaus, wobei diese Entwicklung seit 2016 deutlicher hervortritt. Im Vergleich zu den Resultaten von 2015 ist im Stellwerktest 9 im Niveau A eine Verschlechterung von 14 Punkten und im Niveau B von 20 Punkten feststellbar. Im Niveau C sind es 31 Punkte weniger, wobei hier die Integration des Niveaus D ins Niveau C berücksichtigt werden muss. Seit 2014 bleiben die Stellwerkresultate in Englisch auf einem hohen Niveau relativ konstant (2014: Leistungsanstieg aufgrund von Englisch ab der dritten Primarklasse).

28 Jahresvergleich Leistungsentwicklung von Stellwerk 8 zu 9 Leistungsentwicklung nach Leistungsgruppen Home

29 2018 Leistungsentwicklung von Stellwerk 8 zu 9 Stellwerk 9 Mathematik Deutsch Französisch Englisch Vorstellung % +2.4% +8.2% +3.6% +9.0% % +3.4% +8.5% +4.3% +9.8% % +3.9% +9.9% +4.8% +10.0% % +3.4% +10.4% +4.1% +9.2% % +3.0% +10.1% +3.9% +9.6% Niveau A +2.3% +0.0% -0.8% +0.6% +9.0% Niveau B +1.1% +3.6% +1.7% +1.7% +9.4% Niveau C -0.3% +6.8% +13.4% +7.5% +10.0% Lesehilfe Kommentar

30 Leistungsentwicklung nach Leistungsgruppen Stellwerk Punkte Deutsch Englisch Französisch Mathematik Vorstellung < % 2.3% 11.3% 5.5% 2.5% % 84.2% 86.2% 92.5% 90.4% > % 13.6% 2.5% 2.1% 7.1% Stellwerk Punkte Deutsch Englisch Französisch Mathematik Vorstellung < % 0.9% 1.8% 6.2% 1.1% % 84.5% 96.0% 91.5% 88.7% > % 14.6% 2.2% 2.3% 8.0% Lesehilfe Kommentar

31 2017 Lesehilfe Jahresvergleich Die beiden Tabellen zeigen die Entwicklung der Leistungen der Lernenden vom 8. zum 9. Schuljahr. Berücksichtigt wurden die Testergebnisse aller Lernenden (Regel-, Privat- und Sonderschulen). Die Prozentpunkte in der Tabelle links geben pro Prüfbereich die (positive oder negative) Entwicklung in der durchschnittlichen Punktezahl an. So haben die Lernenden im Fach Deutsch im 9. Schuljahr durchschnittlich um 3.4 Prozentpunkte besser abgeschnitten als im 8. Schuljahr ein Jahr zuvor. Für das jeweils laufende Jahr ist die Entwicklung nach Niveau der Lernenden aufgeschlüsselt. In der Tabelle rechts ist die Leistungsentwicklung der Lernenden nach Leistungsgruppen dargestellt, wobei oben die Verteilung der Testergebnisse auf die drei Leistungsgruppen (<300, und >700 Punkte) im 8. Schuljahr und unten jene im 9. Schuljahr zu sehen ist. Die grosse Mehrheit der Testergebnisse bewegt sich im Bereich von 300 bis 700 Punkten (bei einem Referenzwert von 500 Punkten). Stellwerk 9 Mathematik Deutsch Französisch Englisch Vorstellung % +3.4% +8.8% +6.3% +10.3% Entwicklung von Stellwerk 8 zu 9 Stellwerk Punkte Deutsch Englisch Französisch Mathematik Vorstellung < % 2.6% 11.7% 5.7% 2.5% Entwicklung nach Leistungsgruppen % +2.4% +8.2% +3.6% +9.0% % +3.4% +8.5% +4.3% +9.8% % +3.9% +9.9% +4.8% +10.0% % +3.4% +10.4% +4.1% +9.2% Niveau A +1.3% -0.2% -0.9% +0.4% +8.2% % 84.8% 86.1% 91.7% 88.9% > % 12.7% 2.2% 2.6% 8.6% Stellwerk Punkte Deutsch Englisch Französisch Mathematik Vorstellung < % 1.4% 1.6% 4.9% 1.3% Niveau B +2.6% +3.2% +3.1% +3.6% +9.8% % 85.1% 96.4% 92.2% 79.5% Niveau C +0.5% +7.7% +18.0% +6.8% +9.1% > % 13.4% 2.0% 3.0% 19.1%

32 Kommentar Jahresvergleich Der Vergleich der Leistungen der Lernenden im Stellwerk 8 mit ihren Leistungen ein Jahr später im Stellwerk 9 ergibt eine Steigerung von rund 1 bis 10 Prozent. Die Leistungssteigerung ist im aktuellen Jahr leicht geringer als im Vorjahr. Insgesamt wird deutlich, dass das letzte Schuljahr zur Förderung der Lernenden gewinnbringend genutzt wurde. Die Leistungssteigerung war in den Niveaus B und C deutlicher als im Niveau A, da vermutlich einige Niveau-A-Lernende nach dem 8. Schuljahr ins Kurzzeitgymnasium gewechselt sind. Positiv zu werten ist die Tatsache, dass die Anzahl der Lernenden, die weniger als 300 Punkte erreicht haben, in den Bereichen Deutsch, Französisch, Englisch und Vorstellungsvermögen nochmals deutlich gesunken ist. Bereits im Vorjahr konnte diese positive Entwicklung festgestellt werden. Im Fach Mathematik hat die Anzahl der Lernenden, die weniger als 300 Punkte erreicht haben, zugenommen.

33 Niveauverteilung Stellwerk 8 Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Home

34 Niveauverteilung Stellwerk 8: Mathematik Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Lesehilfe Kommentar Home

35 Niveauverteilung Stellwerk 8: Deutsch Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Lesehilfe Kommentar Home

36 Niveauverteilung Stellwerk 8: Französisch Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Lesehilfe Kommentar Home

37 Niveauverteilung Stellwerk 8: Englisch Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Lesehilfe Kommentar Home

38 Niveauverteilung Stellwerk 8: Vorstellungsvermögen Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Lesehilfe Kommentar Home

39 Lesehilfe Niveauverteilung Stellwerk 8 In den Graphiken ist pro Fach die Verteilung der erzielten Punkte in den einzelnen Niveaus (unterschiedliche Farben) dargestellt. So haben beispielsweise 214 Lernende mit Niveau C im Fach Deutsch zwischen 350 und 400 Punkte erzielt und liegen damit unter dem Referenzwert von 500 Punkten. Im selben Punktebereich lagen 107 Lernende mit Niveau B und 14 Lernende mit Niveau A. Berücksichtigt wurden die Testergebnisse aller Lernenden (Regel-, Privat- und Sonderschulen). Beispiel Deutsch

40 Kommentar Niveauverteilung Stellwerk 8 Bezüglich der Verteilung innerhalb eines Niveaus gibt es im Vergleich zu den Vorjahren kaum Veränderungen. Auffallend ist, dass sich in allen Prüfbereichen die Leistungen in den Niveaus überschneiden, d.h. viele Lernende im Niveau C schneiden besser ab als Lernende in den Niveaus A und B.

41 Streuung der Schulen Mathematik Deutsch Französich Englisch Vorstellungsvermögen Stellwerk Vorjahr (2017) Stellwerk Vorjahr (2017) Lesehilfe Kommentar Home

42 Lesehilfe Streuung Schulen Die Streuung zeigt an, wieviele Punkte die Schulen vom kantonalen Durchschnitt abweichen. Berücksichtigt wurden alle Schulen (d. h. Regel-, Privat- und Sonderschulen), wobei die Berechnung der Streuwerte für die einzelnen Schulen, nicht für die Schulgemeinden durchgeführt wurde. Je kleiner die Streuung, desto homogener sind die Leistungen der verschiedenen Schulen. Schulen, die weniger als 10 Tests durchgeführt haben, wurden in der Auswertung nicht berücksichtigt. Mathematik Deutsch Französich Englisch Vorstellungsvermögen Stellwerk Vorjahr (2016) Stellwerk Vorjahr (2016)

43 Kommentar Streuung Schulen Gegenüber dem Stellwerktest 2017 hat sich die Streuung in den verschiedenen Prüfbereichen unterschiedlich entwickelt. In Stellwerk 8 zeigen sich eine geringe Abnahme (3 Punkte) der Streuung in Englisch und ebenso leichte Zunahmen der Streuung in den anderen Prüfbereichen (Zunahme um rund 2-3 Punkte). Stärkere Veränderungen der Streuung zwischen den Schulen zeigen sich in Stellwerk 9 in den Bereichen Mathematik (Abnahme um 7 Punkte) und Vorstellungsvermögen (Zunahme um 10.2 Punkte).

44 Dienststelle Volksschulbildung Kellerstrasse Luzern