Von Daten zu Taten Informationen aus Rückmeldungen für die Unterrichtsentwicklung nutzen

Transkript

1 Von Daten zu Taten Informationen aus Rückmeldungen für die Unterrichtsentwicklung nutzen Hans Anand Pant Institut für Schulqualität Berlin-Brandenburg Freie Universität Berlin

2 SGS Konzept zum Aufbau eines empiriegestützten Entwicklungskreislaufs an Schulen Durch die Einführung von Vergleichsarbeiten sowie verschiedener Verfahren interner wie externer Evaluation in den vergangenen Jahren steht den Lehrkräften eine Fülle von Daten zur Verfügung. Damit ist die Zielsetzung verbunden, berufliches Wissen und Erfahrung von Lehrkräften durch Informationen zu ergänzen, die auf systematisch erhobenen Daten beruhen. ( ) Alle vorliegenden wissenschaftlichen Befunde bestätigen jedoch, dass die systematische Nutzung dieser Daten für die Unterrichtsentwicklung nach wie vor nicht als gängige Praxis an den Schulen gelten kann. (S. 5) Als neue Aufgabe kommt für SINUS an Grundschulen hinzu, dass Koordinierungspersonen Lehrkräfte dabei unterstützen, die Ergebnisse beispielsweise von Vergleichsarbeiten oder Schulinspektionen zu nutzen und diese auf ihre Klasse und ihren Unterricht zu beziehen. Das bedeutet, Lehrkräfte dabei zu unterstützen, empirische Untersuchungen und statistische Daten zu verstehen und sachgerecht auszuwerten. (S. 14) "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 2

3 Auswertung der wissenschaftlichen Literatur: Faktoren, die die Nutzung von Rückmeldedaten an Schulen beeinflussen Quelle: Schildkamp & Kuiper, 2009, Teaching and Teacher Education "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 3

4 Überblick Aktuell verwendete Rückmeldeelemente in den Lernstandserhebungen / Vergleichsarbeiten Eine Rückmeldung im Detail Tutorensystem t für Rückmeldungen Rückmeldungen und didaktische Materialien Die Rolle von Selbstevaluation "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 4

5 Rückmeldungen: Aussageebene, Adressat, Referenzgruppe, Datenverdichtung Was wird wem mit welchem Vergleichshorizont h i zurückgemeldet? "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 5

6 Mehrstufiger Rückmeldeprozess in die Schulen 1. Sofortrückmeldung Inhalt: Lösungshäufigkeiten der Klasse, nach Geschlecht und Mittelwerte der Rohpunkte 2. individuelle Rückmeldung Inhalt: individuelle und klassenbezogene Lösungsprozente Kompetenzstufenverteilung der Klasse und individuelle Verortung 3. klassenbezogene Rückmeldung Inhalt: klassenbezogene Lösungsprozente (Geschlecht, Migrationshintergrund) g Kompetenzstufenverteilung Übersicht über Einzelschüler/innen 4. schulbezogene Rückmeldung Inhalt: Übersicht Klassenvergleiche nach Kompetenzstufenverteilungen und Lösungsprozenten "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 6

7 Rückmeldung in Form von Fähigkeitsniveaus Fähigkeitsniveau 3 - Fortgeschrittene Fähigkeiten Es werden auch anspruchsvollere Aufgaben hinreichend sicher gelöst. Fähigkeitsniveau 2 - Erweiterte Fähigkeiten Aufgaben mittleren Anforderungsniveaus werden hinreichend sicher gelöst. Fähigkeitsniveau 1 - Grundlegende Fähigkeiten Einfache Aufgaben mit grundlegenden Anforderungen werden hinreichend i h sicher gelöst. Kein hinreichender Nachweis für Fähigkeitsniveau 1 "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 7

8 Von Fähigkeitsniveaus zu Kompetenzstufen VERA 3 VERA 3 ab 2010 Fähigkeitsniveau 3 Fähigkeitsniveau 2 Fähigkeitsniveau 1 V Maximalstandard IV Regelstandard d plus III Regelstandard II Mindeststandard khn / na I "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 8

9 Das Kompetenzmodell der Bildungsstandards V Kompetenzstufe I: Technische Grundlagen (Routineprozeduren ed ren auf der Grundlage einfachen begrifflichen Wissens) 600 IV 530 III 460 II 390 I "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung 9 Folie 9

10 Das Kompetenzmodell der Bildungsstandards V Kompetenzstufe II (Minimalstandard): Einfache Anwendungen von Grundlagenwissen (Routineprozeduren in einem klar strukturierten Kontext) 600 IV 530 III 460 II 390 I "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung 10 Folie 10

11 Das Kompetenzmodell der Bildungsstandards V Kompetenzstufe III (Regelstandard): Ek Erkennen und dnutzen von Zusammenhängen in einem vertrauten (mathematischen und sachbezogenen) Kontext 600 IV 530 III 460 II 390 I "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung 11 Folie 11

12 Das Kompetenzmodell der Bildungsstandards V Kompetenzstufe IV (Regelstandard Plus): Sicheres und flexibles Anwenden von begrifflichem Wissen und Prozeduren im curricularen Umfang 600 IV 530 III 460 II 390 I "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung 12 Folie 12

13 Das Kompetenzmodell der Bildungsstandards V Kompetenzstufe V (Maximalstandard): Modellierung komplexer Probleme unter selbstständiger tä Entwicklung geeigneter Strategien 600 IV 530 III 460 II 390 I "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung 13 Folie 13

14 Das Kompetenzmodell der Bildungsstandards "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 14

15 VERA Einzelschülerbezogene Rückmeldung (für Lehrkraft) Lösungsanteile nach Leitideen und globale Kompetenzstufe "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 15

16 VERA Einzelschülerbezogene Rückmeldung (für Eltern) Lösungsanteile nach Leitideen Begleitender Text, der die getesteten Kompetenzbereiche beschreibt und die Ergebnisinterpretation unterstützt. Die Ergebnisse dieses Tests müssen auch immer vor dem Hintergrund aller Leistungsinformation interpretiert werden, die zu einem Schüler/einer Schülerin vorliegen. "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 16

17 VERA Einzelschülerbezogene Rückmeldung (für Eltern) Ihr Kind "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 17

18 VERA Einzelschülerbezogene Rückmeldung (für Eltern) "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 18

19 VERA Einzelschülerbezogene Rückmeldung (für Eltern) Die Ergebnisse aus der Vergleichsarbeit erlauben eine Zuordnung Ihres Kindes zu einer dieser Kompetenzstufen. Diese Zuordnung ist nur mit einer gewissen Unschärfe möglich, die in der unten stehenden Abbildung im linken Balken ( Ihr Kind ) als Farbverlauf dargestellt ist. Zu 95% liegen die Leistungen Ihres Kindes in dem grau unterlegten Bereich. Der weiße Strich in der Mitte des Farbverlaufes zeigt die wahrscheinlichste Position. Im rechten Balken können Sie sehen, wie viel Prozent der Schülerinnen und Schüler in der Klasse Ihres Kindes die einzelnen Kompetenzstufen t erreicht haben. "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 19

20 VERA Einzelschülerbezogene Rückmeldung (für Eltern) "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 20

21 VERA Klassenbezogene Rückmeldung (für Lehrkraft) Lösungsanteile nach Leitideen "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 21

22 VERA Klassenbezogene Rückmeldung (für Lehrkraft) "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 22

23 VERA Schulbezogene Rückmeldung (für Lehrkraft / Schulleitung) "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 23

24 VERA Schulbezogene Rückmeldung (für Lehrkraft / Schulleitung) Lösungsanteile nach Leitideen "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 24

25 VERA Schulbezogene Rückmeldung (für Lehrkraft / Schulleitung) Lösungsanteile für jedes Einzelitem "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 25

26 Fragen an die Rückmeldungen Beispielhaft einige Fragen Welche Aufgaben wurden in meiner Klasse besonders gut oder schlecht gelöst? Zu welchen Anforderungsbereichen gehören diese Aufgaben? Welches Aufgabenformat haben die Aufgaben? Welche Kompetenzen erfordert die Lösung der Aufgabe? Warum unterscheiden sich meine Werte von Landesvergleichswerten? Wie haben die Parallelklassen im Vergleich abgeschnitten? Haben die Kinder mit schlechten ht Ergebnissen in Mathematik tik auch in Deutsch unterdurchschnittlich abgeschnitten? "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 26

27 Eine Rückmeldung unter der Lupe Kinder und Jugendliche unter 19 Jahren in SGBII-Bedarfsgemeinschaften "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 27

28 Eine Rückmeldung unter der Lupe Mathematik nicht auswertbar Niveau 1 Niveau 2 Niveau 3 Zahlen und Operationen Land Schule 2,0 33,7 34,4 29,9 9,4 65,6 25,0 0% 10% 20% 30% 40% 50% 60% 70% 80% 90% 100% nicht auswertbar Niveau 1 Niveau 2 Niveau 3 Größen und Messen Land 2,6 37,0 36,9 23,6 Schule 34,4 34,4 31,3 0% 10% 20% 30% 40% 50% 60% 70% 80% 90% 100% "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 28

29 Eine Rückmeldung unter der Lupe Mathematik nicht auswertbar Niveau 1 Niveau 2 Niveau 3 Zahlen und Land 4b (17) 4a (16) 2,0 33,7 34,4 29,9 6,7 73,5 19,8 Operationen Gab es besonders schwierige Aufgaben? 11,7 58,9 29,5 0% 10% 20% 30% 40% 50% 60% 70% 80% 90% 100% Warum klappt das in der einen, nicht aber in der anderen Klasse? nicht auswertbar Niveau 1 Niveau 2 Niveau 3 Größen und Messen Land 4b (17) 2,6 37,0 36,9 23,6 13,1 40,0 46,9 Sind bestimmte Inhalte noch nicht behandelt worden? 4a (16) 52,8 29,5 17,5 0% 20% 40% 60% 80% 100% "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 29

30 Eine Rückmeldung unter der Lupe "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 30

31 Mathematik Zahlen und Operationen Land 4a 4b 1 3a 3b 3c 5a 5b 5c a 11b 13a 13b 15 17a 17b 19a 19b 21 "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 31

32 Eine Rückmeldung unter der Lupe Mathematik Zahlen und Operationen Land 4b 4a 1 3a 3b 3c 5a 5b 5c a 11b 13a 13b 15 17a 17b 19a 19b 21 "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 32

33 Eine Rückmeldung unter der Lupe Mathematik Größen und Messen Land 4b 4a 2a 2b 4 6a 6b 6c 6d 6e 6f 8a 8b 10a 10b 10c 10d 10e a 16b 16c 18a 18b 18c 20 "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 33

34 Eine Rückmeldung unter der Lupe "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 34

35 Eine Rückmeldung unter der Lupe Mathematik Größen und Messen Land 4b 4a 2a 2b 4 6a 6b 6c 6d 6e 6f 8a 8b 10a 10b 10c 10d 10e a 16b 16c 18a 18b 18c 20 "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 35

36 Eine Rückmeldung unter der Lupe Deutsch Leseverständnis Land 4b 4a a 3.1b 3.1c 3.1d 3.1e "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 36

37 Eine Rückmeldung unter der Lupe 4 a Deutsch Mathematik alles W TM TD Schreib Lesev ges ZaOp GrMe ges 1 Celina w Lina w Lisa w Marie w Helena w Pauline w Hanna w Luise w Marie-Luise w Elias m Tobias m Jakob m Karl m Georg m Welche 15 Schüler/innen Richard m haben besonders 12 3 schlecht abgeschnitten? Helge m Malte m "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 37

38 Eine Rückmeldung unter der Lupe 4 a Deutsch Mathematik alles W TM TD Schreib Lesev ges ZaOp GrMe ges 1 Celina w Lina w Lisa w Marie w Helena w Pauline w Hanna w Luise w Marie-Luise w Elias m Tobias m Jakob m Karl m Georg m Richard m Helge m Malte m "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 38

39 Eine Rückmeldung unter der Lupe 4 b Deutsch Mathematik alles b W TM TD Schreib. Lesev. gesamt ZaOp GrMe gesamt 1 Mark m Saskia w Anna w Martin m Max m X Fritz m Clara w Cindy w X X Nicole w X Florian m Kevin m Leonie w Lisa-Marie w Julia w Welche Ergebnisse haben mich überrascht? 15 Henning m Konstantin m "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 39

40 Eine Rückmeldung unter der Lupe 4 b Deutsch TM W+TM TD Mathematik "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 40

41 Eine Rückmeldung unter der Lupe 4 a Deutsch Mathematik Wie lassen sich Besonderheiten der Verteilung erklären? "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 41

42 Eine Rückmeldung unter der Lupe 4 a 4 b Deutsch 25 Deutsch Mathematik tik Mathematik tik "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 42

43 Alternativen zum aufsuchenden Einzeltutoring Online-gestütztes Tutorensystem ( 20 Minuten für Ihre Rückmeldung ) mit interaktivem Datenspielplatz für die eigenen Ergebnisse Didaktische Materialien online Tinkerplot "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 43

44 Didaktische Materialien online Material, dass die Lehrkräfte aktuell zur Verfügung haben: 20 Seiten Arbeitshefte für jeden der 25 Schüler ca. 10 Seiten klassen- und schulspezifische Rückmeldungen ca. 100 Seiten didaktische Informationen Die Extraktion der wesentlichen Informationen ist das Problem. Möglichkeiten der Hilfestellung: Aufgabenkarten spezifische Zusammenstellung der didaktischen Hinweisei Fokussierung des Problems mit Hilfe (hierarchischer) Fragenkataloge "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 44

45 Didaktische Materialien online "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 45

50 Didaktische Materialien online Didaktische Materialien müssen (soweit als möglich) in elektronischer Form verfügbar gemacht werden. Ziel: Aus den Ergebnisrückmeldungen direkt zur Aufgabendatenbank verknüpfen Zusammenstellung von Metadaten t derjenigen Aufgaben, die überdurchschnittlich schlecht oder gut gelöst worden sind (geordnete Aufgabenkarten: Aufgabe, Metadaten, Ergebnis der Klasse) Erstellung eines Curriculum-Vorschlages aus den Hinweisen zur Weiterarbeit, ggf. mit Verweisen auf individuelle Probleme (am Rand: Bei Gruppenarbeit zur Bruchrechnung Luise mit Tim zusammensetzen ). "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 50

51 Analyse mit Hilfe der didaktischen Materialien 100% 90% 80% 70% 60% 50% 40% 30% 20% 10% 0% Land Klasse 8a Daten und Zufall Funktionaler Zusammenhang Raum und Form Messen Zahl "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 51

52 Analyse mit Hilfe der didaktischen Materialien 100% 90% 80% 70% 60% 50% 40% 30% 20% 10% 0% Land Klasse 8a Daten und Zufall Funktionaler Zusammenhang Raum und Form Messen Zahl "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 52

53 Analyse mit Hilfe der didaktischen Materialien -15% "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 53

54 Analyse mit Hilfe der didaktischen Materialien 100% 90% 80% 70% 60% 50% 40% 30% 20% 10% 0% Funktionaler Zusammenhang Land 5 Aufgaben, 13 Items Klasse 8a "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 54

55 Analyse mit Hilfe der didaktischen Materialien 100% 90% Land 80% Klasse 8a 70% 60% 50% 40% 30% 20% 10% 0% Funktionaler Zusammenhang 5 Aufgaben, 13 Items Anforderungsbereich Kompetenzen Verallgemeinern, math. kommunizieren reflektieren Zusammenhänge mit Elementen umgehen herstellen Darstellungen verwenden Reproduzieren math. Modellieren Probleme math. lösen Verallgemeinern, reflektieren math. Argumentieren Zusammenhänge herstellen "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 55

56 Analyse mit Hilfe der didaktischen Materialien Wir haben sehr deutlich zeigen können: Das Problem in unserer Klasse ist, dass Aufgaben schlechter gelöst werden, die a) eine komplexere Arbeitsweise voraussetzen (mindestens Zusammenhänge herstellen, vielleicht auch Verallgemeinern) und b) die Kompetenz mathematisch Modellieren benötigen. Analyse typischer Schülerlösungen zur Identifikation konkreter Defizite "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 56

57 Analyse mit Hilfe der didaktischen Materialien 14.1 Kanutour "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 57

58 Analyse mit Hilfe der didaktischen Materialien Beispiel: Ein Vergleich beider Angebote erfolgt nur anhand einer ganz bestimmten Anzahl gefahrener Kilometer, d.h. die globale Struktur beider Tarife wird nicht beachtet, wie folgende Schülerlösung verdeutlicht (K3). "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 58

59 Analyse mit Hilfe der didaktischen Materialien Zwar wird erkannt, dass der Preis von der zu fahrenden Strecke abhängt, aber es wird nur rein qualitativ argumentiert, wie die nächste Schülerlösung zeigt (u.a. K3). "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 59

60 Analyse mit Hilfe der didaktischen Materialien Wir betrachten den Modellierungskreislauf, in dem die einzelnen Schritte zum Lösen von Aufgaben dargelegt sind, welche die Kompetenz mathematisch Modellieren benötigen. Man stellt fest, dass schon im Schritt 2 die Kompetenz fehlt, die Aufgabe in der realen Situation konkret zu beschreiben. Spätestens aber bei der Erstellung des mathematischen Modells scheitern die meisten der Schülerinnen und Schüler der vorliegenden Klasse. "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 60

61 Analyse mit Hilfe der didaktischen Materialien Mögliche Konsequenz: Zusammensetzung von Lerngruppen (mindestens ein/e besonders gute/r Schüler/in) festlegen In den Lerngruppen sind nun entsprechende Aufgaben zu bearbeiten, b die die Schüler/innen in die Lage versetzen a) die aus der Aufgabe entnommenen notwendigen Informationen so zu strukturieren, dass man damit weiter arbeiten kann und b) das Modell mathematisch zu beschreiben. "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 61

62 Kreative Lösungen werden gefördert "Von Daten zu Taten" SINUS an Grundschulen Auftaktveranstaltung Folie 62

63 Vielen Dank für Ihre Aufmerksamk it! 63