Stellwerktest Auswertung Kanton Luzern. Start

Transkript

1 Stellwerktest 2017 Auswertung Kanton Luzern Start

2 Inhalt Kantonale Ergebnisse 2017 Mehrjahresvergleich nach Fach/Bereich Mehrjahresvergleich nach Niveau Was ist Stellwerk? Rücklauf Niveauverteilung Stellwerk 8 Jahresvergleich Streuung der Schulen

3 Was ist Stellwerk? Stellwerk (Link) ist ein multimediales, adaptives Testsystem, das vom Institut für Bildungsevaluation Zürich konzipiert wurde und vom Lehrmittelverlag St. Gallen unter der Aufsicht einer Kommission betrieben und betreut wird. Es besteht aus Leistungstests, die sich an den Lehrplänen und Lehrmitteln der 8. und 9. Klasse orientieren. Stellwerk ist ein adaptives Testsystem, d.h. dass das Testsystem den Schwierigkeitsgrad der Testfragen ausgehend von den gegebenen Antworten einer/eines Lernenden jeweils neu einschätzt. Nach dem Lösen mehrerer Aufgaben in einem Test pendelt sich die messbare Leistung des/der Getesteten bei einer Punktezahl ein (siehe Grafik). Verlauf und Dauer des Tests hängen somit vom Antwortverhalten der Lernenden ab (Erfahrungswert: Minuten pro Test). weiter

4 Was ist Stellwerk? Aufgaben und ihre Schwierigkeitsgrade Jede Aufgabe ist einem Leistungsbereich (z.b. "Zahlen, Grössen, Operationen W1") zugeordnet. Links ist ein Beispiel für eine Aufgabe aus einem einfacheren Bereich von Stellwerk 8 (260 Punkte), rechts ein Beispiel für eine Aufgabe aus einem schwierigeren Bereich (800 Punkte) abgebildet. weiter

5 Was ist Stellwerk? Darstellung und Interpretation der Ergebnisse Die Testergebnisse werden auf einer normierten Skala von 200 bis 800 Punkten mit einem Mittelwert von 500 Punkten dargestellt (siehe Grafik). Die Normierung basiert auf den Ergebnissen der Lernenden der 8. und 9. Klassen des Kantons St. Gallen (Referenzpopulation), d.h. jedes individuelle Testergebnis wird in die Verteilung der Testergebnisse der St. Galler Lernenden eingeordnet. 2.5 Prozent der St. Galler Ergebnisse liegen bei weniger als 300 Punkten bzw. mehr als 700 Punkten, d.h. 95 Prozent der St. Galler Lernenden erzielten zwischen 300 und 700 Punkten. Rund 68 Prozent der Testergebnisse liegen zwischen 400 und 600 Punkten. weiter

6 Was ist Stellwerk? Referenzrahmen und Interpretationshilfe Den Testaufgaben von Stellwerk liegt ein Referenzrahmen mit Can-do-Formulierungen zugrunde, welcher sich wiederum auf eine Auswahl von Lernzielen aus den Lehrplänen der Deutschschweizer Kantone bezieht. Somit lassen die Testergebnisse Rückschlüsse auf die Kompetenzen der Lernenden zu. Die Interpretationshilfe veranschaulicht mithilfe von Kompetenzbeschreibungen und typischen Aufgabenbeispielen, was Lernende mit einem bestimmten Testergebnis wissen und können (siehe Tabelle). Kompetenz Erzielte Punkte Aufgabenbeispiel weiter

7 Was ist Stellwerk? Leistungsprofil Die Lernenden erhalten als Übersicht über ihre Ergebnisse ein Leistungsprofil, in welchem der Gesamtwert (rot) sowie die Werte der einzelnen Teilbereiche (dunkelgraue senkrechte Linie) pro Fach aufgeführt sind. Der Messfehler im Vertrauensbereich ist mit Farbflächen dargestellt (z.b. im Fach Mathematik der blaue Bereich). Das Leistungsprofil kann mit einem Berufsprofil (Link) abgeglichen werden. So wird ersichtlich, inwiefern die jetzigen Kompetenzen mit den Anforderungen eines Berufs übereinstimmen. weiter

8 Auswertung Kanton Luzern: Was wurde gemacht? Aus folgenden Gründen können die Ergebnisse dieser Auswertung leicht von früheren Daten abweichen: > In der kantonalen Auswertung wurden nur Ergebnisse von Tests berücksichtigt, die im vorgegebenen Zeitfenster absolviert wurden. Anders als bei früheren Auswertungen wurden die Daten also an einem feststehenden Stichtag (d.h. am Ende des vorgegebenen Zeitfensters) erhoben. Eine verspätete Dateneingabe führt somit nicht mehr zu stetigen Veränderungen kantonaler Werte. > Testergebnisse mit starken Ausreissern nach unten und oben (d.h. <0 und >1000 Punkte) wurden auf 0 bzw Punkte bereinigt. Dies betrifft 0.03% aller Tests. home

9 Rücklauf Anzahl Lernende per Stellwerk Mathematik Deutsch Französisch Englisch Vorstellung 1. September % 98.5% 89.0% 98.3% 98.5% % 98.3% 51.1% 89.1% 91.3% % 99.6% 91.1% 99.3% 98.9% % 97.7% 51.7% 89.0% 93.5% % 98.7% 89.3% 98.5% 99.9% % 98.0% 48.9% 88.8% 93.7% % 99.3% 89.7% 98.5% 99.2% % 98.7% 49.2% 88.1% 94.8% % 99.9% 90.8% 99.1% 100.0% % 97.7% 46.9% 87.3% 93.9% % 98.3% 89.4% 97.1% 97.0% % 89.3% 43.6% 81.2% 84.5% 3197 Lesehilfe Kommentar Home

10 Lesehilfe Rücklauf In der Tabelle wird die Anzahl der Lernenden in öffentlichen Regelschulen, die den Stellwerktest ausgefüllt haben, mit der Gesamtzahl der Lernenden im entsprechenden Schuljahr (Stand 1. September) verglichen. Die in Privat- und Sonderschulen durchgeführten Tests werden in der Auswertung nicht berücksichtigt. Lernende mit Verfügungen aufgrund einer geistigen Behinderung sind vom Stellwerktest suspendiert; für alle anderen ist die Teilnahme am Test obligatorisch. In den für alle Lernenden obligatorischen Prüfbereichen Mathematik, Deutsch und Vorstellungsvermögen erlauben die deutlich von 100 Prozent abweichenden Werte Rückschlüsse über Dispensen bzw. über die nach Ablauf der Frist ausgefüllten Tests (siehe Kommentar). Bei der Interpretation der Werte in den Fächern Französisch und Englisch muss berücksichtigt werden, dass im 9. Schuljahr nicht alle Lernenden diese Fächer belegen. Stellwerk Mathematik Deutsch Französisch Englisch Vorstellung Anzahl Lernende per 1. September % 98.5% 89.0% 98.3% 98.5% % 98.3% 51.1% 89.1% 91.3% % 99.6% 91.1% 99.3% 98.9% % 97.7% 51.7% 89.0% 93.5% % 98.7% 89.3% 98.5% 99.9% % 98.0% 48.9% 88.8% 93.7% % 99.3% 89.7% 98.5% 99.2% % 98.7% 49.2% 88.1% 94.8% % 99.9% 90.8% 99.1% 100.0% % 97.7% 46.9% 87.3% 93.9% % 98.3% 89.4% 97.1% 97.0% % 89.3% 43.6% 81.2% 84.5% 3197

11 Kommentar Rücklauf Die Rücklaufquote ist im Schuljahr 2016/2017 in allen Fächern gegangen. Im Vergleich mit dem Vorjahr fällt insbesondere der starke Rückgang beim Stellwerk 9 auf. So haben im Fach Mathematik 2017 rund 19 Prozent der Lernenden den Stellwerktest 9 nicht ausgefüllt, während es im Vorjahr nur rund 5 Prozent waren. Den Deutschtest im 9. Schuljahr haben rund 89 Prozent (- 9% gegenüber 2016), den Englischtest rund 81 Prozent (- 6% gegenüber 2016), den Französischtest rund 44 Prozent (- 3 % gegenüber 2016) und den Test zum Vorstellungsvermögen rund 85 Prozent (- 9% gegenüber 2016) absolviert. Die geringeren Rücklaufquoten sind damit zu erklären, dass im Jahr 2017 die verbindliche Frist für das Ausfüllen der Tests eingehalten werden musste. Vier Lernenden wurde durch die DVS die Bewilligung erteilt, den Stellwerktest in allen Fächern nach dieser Frist durchzuführen. Die Tests, die nach der gesetzten Frist ausgefüllt wurden, wurden in der Auswertung der Schulen und des Kantons nicht mehr berücksichtigt; nichtsdestotrotz erhielten alle Lernenden das Testergebnis in Form eines persönlichen Leistungsprofils. Im Fach Französisch haben bereits im 8. Schuljahr rund 10 Prozent nicht am Stellwerktest teilgenommen, was in etwa den Werten der Vorjahre entspricht und vermutlich auf Lernende mit Dispensen zuführen ist. Für Letztere wäre der Test allerdings verbindlich. Im 9. Schuljahr wählen viele Lernende Französisch als Fremdsprachenfach ab, dementsprechend tief ist die Rücklaufquote.

12 Kantonale Ergebnisse 2017 Lesehilfe Kommentar Home

13 Lesehilfe kantonale Ergebnisse 2017 In der Graphik werden für jeden Prüfbereich von Stellwerk 8 und 9 die durchschnittlich erzielten Punkte des Jahres 2017 dargestellt. Berücksichtigt wurden die Ergebnisse aller Lernenden (Regel-, Privat- und Sonderschulen).

14 Kommentar kantonale Ergebnisse 2017 In den Fächern Mathematik, Deutsch und Französisch liegt das durchschnittliche Testergebnis um den bzw. knapp unter dem Referenzwert von 500 Punkten. Im Fach Englisch und im Vorstellungsvermögen sind die Testergebnisse deutlich höher als der Referenzwert.

15 Mehrjahresvergleich nach Fach/Bereich Stellwerk 8 Stellwerk 9 Home

16 Mehrjahresvergleich nach Fach/Bereich: Stellwerk 8 Stellwerk 8 Stellwerk 9 Lesehilfe Kommentar Home

17 Mehrjahresvergleich nach Fach/Bereich: Stellwerk 9 Stellwerk 8 Stellwerk 9 Lesehilfe Kommentar Home

18 Lesehilfe Mehrjahresvergleich nach Fach/Bereich In den Graphiken ist pro Stellwerk die mehrjährige Entwicklung der durchschnittlich erzielten Punkte in den fünf Prüfbereichen dargestellt. Der Referenzwert liegt bei 500 Punkten. Berücksichtigt wurden die Ergebnisse aller Lernenden (Regel-, Privat- und Sonderschulen). Stellwerk 8 Stellwerk 9

19 Kommentar Mehrjahresvergleich nach Fach/Bereich Grundsätzlich bleiben die Stellwerkergebnisse über die Jahre hinweg relativ konstant. Augenfällig sind die beiden Anstiege im Englisch absolvierte der erste Jahrgang mit Englisch ab der dritten Primarklasse den Stellwerktest 8, ein Jahr später den Stellwerktest 9. Seither stagnieren die Ergebnisse in Englisch auf einem höheren Niveau, wobei im Jahr 2017 sowohl im 8. als auch im 9. Schuljahr der bisher höchste Wert erreicht wurde. Auch im Vorstellungsvermögen schneiden die Lernenden gut ab. In den Fächern Deutsch, Mathematik und Französisch liegen die Lernenden im 9. Schuljahr im Bereich des Referenzwerts (500 Punkte), während Lernende im 8. Schuljahr in den Fächern Deutsch und Mathematik deutlicher, im Fach Französisch am stärksten vom Referenzwert abweichen.

20 Mehrjahresvergleich nach Niveau Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Home

21 Mehrjahresvergleich nach Niveau: Mathematik Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Lesehilfe Kommentar Home

22 Mehrjahresvergleich nach Niveau: Deutsch Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Lesehilfe Kommentar Home

23 Mehrjahresvergleich nach Niveau: Französisch Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Lesehilfe Kommentar Home

24 Mehrjahresvergleich nach Niveau: Englisch Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Lesehilfe Kommentar Home

25 Mehrjahresvergleich nach Niveau: Vorstellungsvermögen Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Lesehilfe Kommentar Home

26 Lesehilfe Mehrjahresvergleich nach Niveau In den Graphiken ist pro Fach die mehrjährige Entwicklung der durchschnittlich erzielten Punkte dargestellt. Berücksichtigt wurden die Testergebnisse aller Lernenden (Regel-, Privatund Sonderschulen). Pro Niveau (unterschiedliche Farbe) ist die Entwicklung in den Ergebnissen der Stellwerke 8 und 9 mit unterschiedlicher Farbhelligkeit dargestellt. Seit 2016 existieren nur noch die drei Niveaus A, B und C; die noch verbliebenen D-Lernenden wechselten kontinuierlich ins Niveau C. Beispiel Deutsch

27 Kommentar Mehrjahresvergleich nach Niveau In den einzelnen Niveaus wurden verschiedene durchschnittliche Punktzahlen erzielt, wobei im Durchschnitt die Lernenden im Niveau A am besten, jene im Niveau C am schlechtesten abschneiden. So erzielten beispielsweise im Mathematiktest 2017 die Lernenden im Niveau A im 9. Schuljahr durchschnittlich 585 Punkte, während jene im Niveau B 504 Punkte und jene im Niveau C 391 Punkte erreichten. Dies bedeutet allerdings nicht, dass alle Lernenden im Niveau A bessere Tests geschrieben haben als jene in den Niveaus B und C. Für die genaue Niveauverteilung im 8. Schuljahr siehe Niveauverteilung Stellwerk 8. Seit 2016 fiel das kantonale Ergebnis im Niveau C leicht tiefer aus als in den Jahren zuvor, was damit erklärt werden kann, dass 2016 das Niveau D aufgehoben und die entsprechenden Lernenden ins Niveau C integriert wurden. Weil die Anzahl von D-Lernenden bis zur Aufhebung des Niveaus im Jahr 2016 kontinuierlich sank, ist die Leistungsentwicklung im Niveau D für die Jahre 2014 und 2015 nur schwer zu interpretieren.

28 Jahresvergleich Leistungsentwicklung von Stellwerk 8 zu 9 Leistungsentwicklung nach Leistungsgruppen Home

29 Leistungsentwicklung von Stellwerk 8 zu 9 Stellwerk 9 Mathematik Deutsch Französisch Englisch Vorstellung % +3.4% +8.8% +6.3% +10.3% % +2.4% +8.2% +3.6% +9.0% % +3.4% +8.5% +4.3% +9.8% % +3.9% +9.9% +4.8% +10.0% % +3.4% +10.4% +4.1% +9.2% 2017 Niveau A +1.3% -0.2% -0.9% +0.4% +8.2% Niveau B +2.6% +3.2% +3.1% +3.6% +9.8% Niveau C +0.5% +7.7% +18.0% +6.8% +9.1% Lesehilfe Kommentar

30 Leistungsentwicklung nach Leistungsgruppen Stellwerk Punkte Deutsch Englisch Französisch Mathematik Vorstellung < % 2.6% 11.7% 5.7% 2.5% % 84.8% 86.1% 91.7% 88.9% > % 12.7% 2.2% 2.6% 8.6% Stellwerk Punkte Deutsch Englisch Französisch Mathematik Vorstellung < % 1.4% 1.6% 4.9% 1.3% % 85.1% 96.4% 92.2% 79.5% > % 13.4% 2.0% 3.0% 19.1% Lesehilfe Kommentar

31 Lesehilfe Jahresvergleich Die beiden Tabellen zeigen die Entwicklung der Leistungen der Lernenden vom 8. zum 9. Schuljahr. Berücksichtigt wurden die Testergebnisse aller Lernenden (Regel-, Privat- und Sonderschulen). Die Prozentpunkte in der Tabelle links geben pro Prüfbereich die (positive oder negative) Entwicklung in der durchschnittlichen Punktezahl an. So haben die Lernenden im Fach Deutsch im 9. Schuljahr durchschnittlich um 3.4 Prozentpunkte besser abgeschnitten als im 8. Schuljahr ein Jahr zuvor. Für das jeweils laufende Jahr ist die Entwicklung nach Niveau der Lernenden aufgeschlüsselt. In der Tabelle rechts ist die Leistungsentwicklung der Lernenden nach Leistungsgruppen dargestellt, wobei oben die Verteilung der Testergebnisse auf die drei Leistungsgruppen (<300, und >700 Punkte) im 8. Schuljahr und unten jene im 9. Schuljahr zu sehen ist. Die grosse Mehrheit der Testergebnisse bewegt sich im Bereich von 300 bis 700 Punkten (bei einem Referenzwert von 500 Punkten). Stellwerk 9 Mathematik Deutsch Französisch Englisch Vorstellung % +3.4% +8.8% +6.3% +10.3% Entwicklung von Stellwerk 8 zu 9 Stellwerk Punkte Deutsch Englisch Französisch Mathematik Vorstellung < % 2.6% 11.7% 5.7% 2.5% Entwicklung nach Leistungsgruppen % +2.4% +8.2% +3.6% +9.0% % +3.4% +8.5% +4.3% +9.8% % +3.9% +9.9% +4.8% +10.0% % +3.4% +10.4% +4.1% +9.2% Niveau A +1.3% -0.2% -0.9% +0.4% +8.2% Niveau B +2.6% +3.2% +3.1% +3.6% +9.8% % 84.8% 86.1% 91.7% 88.9% > % 12.7% 2.2% 2.6% 8.6% Stellwerk Punkte Deutsch Englisch Französisch Mathematik Vorstellung < % 1.4% 1.6% 4.9% 1.3% % 85.1% 96.4% 92.2% 79.5% 2017 Niveau C +0.5% +7.7% +18.0% +6.8% +9.1% > % 13.4% 2.0% 3.0% 19.1%

32 Kommentar Jahresvergleich Der Vergleich der Leistungen der Lernenden im Stellwerk 8 mit ihren Leistungen ein Jahr später im Stellwerk 9 ergibt eine Steigerung von rund 1 bis 10 Prozent. Damit wird deutlich, dass das letzte Schuljahr zur Förderung der Lernenden gewinnbringend genutzt wurde. Die Leistungssteigerung war in den Niveaus B und C deutlicher als im Niveau A, da vermutlich einige A-Lernende im letzten Schuljahr ins Kurzzeitgymnasium gewechselt sind. Positiv zu werten ist die Tatsache, dass die Anzahl der Lernenden, die weniger als 300 Punkte erreicht haben, in sämtlichen Prüfbereichen nochmals deutlich gesunken ist. Bereits im Vorjahr konnte diesbezüglich eine positive Entwicklung festgestellt werden.

33 Niveauverteilung Stellwerk 8 Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Home

34 Niveauverteilung Stellwerk 8: Mathematik Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Lesehilfe Kommentar Home

35 Niveauverteilung Stellwerk 8: Deutsch Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Lesehilfe Kommentar Home

36 Niveauverteilung Stellwerk 8: Französisch Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Lesehilfe Kommentar Home

37 Niveauverteilung Stellwerk 8: Englisch Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Lesehilfe Kommentar Home

38 Niveauverteilung Stellwerk 8: Vorstellungsvermögen Mathematik Deutsch Französisch Englisch Vorstellungsvermögen Lesehilfe Kommentar Home

39 Lesehilfe Niveauverteilung Stellwerk 8 In den Graphiken ist pro Fach die Verteilung der erzielten Punkte in den einzelnen Niveaus (unterschiedliche Farben) dargestellt. So haben beispielsweise 214 Lernende mit Niveau C im Fach Deutsch zwischen 350 und 400 Punkte erzielt und liegen damit unter dem Referenzwert von 500 Punkten. Im selben Punktebereich lagen 107 Lernende mit Niveau B und 14 Lernende mit Niveau A. Berücksichtigt wurden die Testergebnisse aller Lernenden (Regel-, Privat- und Sonderschulen). Beispiel Deutsch

40 Kommentar Niveauverteilung Stellwerk 8 Bezüglich der Verteilung innerhalb eines Niveaus hat sich im Vergleich zu den Vorjahren nichts geändert. Auffallend ist, dass in allen Prüfbereichen viele Lernende im Niveau C besser abschneiden als Lernende in den Niveaus A und B. Dieses Muster ist in der Tendenz bei allen Sekundarschulmodellen (KSS, GSS und ISS) feststellbar.

41 Streuung der Schulen Mathematik Deutsch Französich Englisch Vorstellungsvermögen Stellwerk Vorjahr (2016) Stellwerk Vorjahr (2016) Lesehilfe Kommentar Home

42 Lesehilfe Streuung Schulen Die Streuung zeigt an, wieviele Punkte die Schulen vom kantonalen Durchschnitt abweichen. Berücksichtigt wurden alle Schulen (d. h. Regel-, Privat- und Sonderschulen), wobei die Berechnung der Streuwerte für die einzelnen Schulen, nicht für die Schulgemeinden durchgeführt wurde. Je kleiner die Streuung, desto homogener sind die Leistungen der verschiedenen Schulen. Schulen, die weniger als 10 Tests durchgeführt haben, wurden in der Auswertung nicht berücksichtigt. Mathematik Deutsch Französich Englisch Vorstellungsvermögen Stellwerk Vorjahr (2016) Stellwerk Vorjahr (2016)

43 Kommentar Streuung Schulen Gegenüber dem Vorjahr (Stellwerk 2016) hat sich die Streuung in den verschiedenen Prüfbereichen unterschiedlich entwickelt. Während im Stellwerk 8 die Streuung in den Bereichen Mathematik, Deutsch und im Vorstellungsvermögen rund 1 bis 3 Punkte gesunken ist, hat sie in den Fächern Englisch und Französisch um rund 5 bis 6 Punkte zugenommen. In Stellwerk 9 ist die Streuung mit Ausnahme im Prüfbereich Vorstellungsvermögen gestiegen, wobei der markante Anstieg im Fach Mathematik von 35 auf 44 Punkte und im Fach Deutsch von rund 27 auf rund 34 Punkte auffällt.

44 Dienststelle Volksschulbildung Kellerstrasse Luzern