Failing School - Die Perspektive der Externen Schulevaluation

Transkript

1 Norbert Landwehr PH FHNW / Monica Morgenthaler BKS Aargau Failing School - Die Perspektive der Externen Schulevaluation Tagung vom 9. September 2011: Workshopunterlage 1

2 Aargauer Evaluationskonzept: Die 3 Grundelemente Ampelevaluation Profilevaluation Fokusevaluation Leitfrage: Ist die Funktionsfähigkeit der Schule in den 8 Kernfunktionen gewährleistet? Ziel: Die Funktionsfähigkeit der Schule wird überprüft; gravierende Defizite werden aufgezeigt und als dringender Entwicklungsbedarf benannt. Leitfrage: Welches ist das charakteristische Stärke-Schwäche-Profil der Schule aus der Sicht von unabhängigen Dritten? Ziel: Das charakteristische Profils der Schule und der damit verbundenen Chancen und Risiken wird beschrieben. Leitfrage: Wo steht die Schule im gewählten Entwicklungsschwerpunkt? (Selbst- und Fremdbildbild) Ziel: Die Schule erhält Anregungen für die nächsten Entwicklungsschritte. 2

3 Vier Wirkungsbereiche der externen Schulevaluation Wissensgewinnung Datengestütztes Qualitätswissen hilft der Schule, das eigene Profil klarer zu sehen, bestimmte Problemlagen besser zu verstehen und offen zu thematisieren. Rechenschaftslegung Datengrundlage für einen glaubwürdigen Qualitätsnachweis gegenüber dem politischen Auftraggeber sowie gegenüber der interessierten Öffentlichkeit. Schulentwicklung Impulse zur Beseitigung von Qualitätsdefiziten und zum bewussten Ausbau von profilbildenden Stärken. Normendurchsetzung Geltende Normen werden den Betroffenen bewusst gemacht und deren Umsetzung verbindlich eingefordert. :

4 Wodurch wird die Entwicklungswirksamkeit beeinflusst? 4. Innerschulische Merkmale 1. Merkmale des Evaluationsprozesses 2. Verarbeitungsprozesse der Schule Reaktionen der Schulen auf die Evaluationsergebnisse (innerschulische Reaktionen) 3. Resultierende Effekte und Nebeneffekte (Wirkungen) 5. Externe Impulse und Unterstützungsleistungen nach: Ehren M.C.M.; Visscher, A.J. (2006): Towards A Theory On the Impact of School Inspections. In: British Journal of Educational Studies, vol. 54, no. 1,

5 Einflussfaktoren für wirksame Verarbeitungsprozesse: Verantwortungsbereich Evaluationsteam Vertrauenswürdigkeit der Evaluation als Ganzes: Die Evaluation vermag von der Anlage her positive Erwartung bezüglich des Seriosität und Nutzens zu erzeugen. Organisation/Prozessgestaltung der Evaluation: Hohe Transparenz und Plausibilität der verwendete Kriterien und Indikatoren; professionelles Instrumentarium; adäquater Einbezug der Betroffenen. Kommunikationsstil der Evaluationspersonen: professionell; rücksichtsvoll, aber unparteiisch; verständnisvoll aufnehmend ohne subjektiv-wertend zu filtern. Qualität der Rückmeldung an die Schule: Schwächen werden klar und prägnant benannt; Positives wird angemessen gewürdigt; nachvollziehbarer Schluss vom Besonderen auf das Allgemeine; Einsichtige, verständnisvolle Problemdiagnose. 5

6 Einflussfaktoren für wirksame Verarbeitungsprozesse: Verantwortungsbereich Schule Einstellung der Schule gegenüber Veränderungen: Schule versteht sich als lernende Organisation und als professionelle Lerngemeinschaft ; sie fühlt sich für Q-Entwicklung verantwortlich. Schulinternes Qualitätsmanagement: Funktionsfähiges Q- Management; Erfahrung mit schulinternen Evaluationen (vor allem: Umgang mit Evaluationsergebnissen!) Einbezug des Kollegiums: Lehrpersonen werden einbezogen in die Dateninterpretation. Primäres Ziel: Nachvollzug der Problemdiagnose. Moderationskompetenz ist vorhanden. Schulentwicklungserfahrung: Erfahrung/Kompetenz im Umgang mit Schul- und Unterrichtsentwicklungsprojekten. Entsprechende institutionelle Voraussetzungen sind vorhanden. Eigenverantwortliche Nutzung der Evaluationsergebnisse: Entwicklungsmassnahmen werden auf dem Hintergrund der Evaluationsergebnisse selber abgeleitet. 6

7 Ampelkriterien in der Externen Schulevaluation FHNW 7

8 Ziele und Leitfragen der Ampelevaluation Ziel der Ampelevaluation: Es wird untersucht/berichtet, ob die Schule den grundlegenden Anforderungen der Funktionsfähigkeit zu genügen vermag. Ziel dieses Evaluationsteils liegt in der Erfüllung der Rechenschafts- und Normendurchsetzungsfunktion. Leitfragen der Ampel-Evaluation Werden die grundlegenden Erwartungen, welche die Eltern (und Politiker) an eine öffentliche Schule haben dürfen, angemessen erfüllt? Ist die Schule funktionsfähig bezüglich der grundlegenden Aufgaben, die sie erfüllen muss? 8

9 Zur Eigenheit der Ampelevaluation: Defizitorientierte Betrachtungsweise Bei der Ampelbeurteilung geht es nicht um das Aufzeigen von Stärken der Schule, sondern um die Frage, ob Abweichungen von einem erwartbaren Normalzustand (= Defizite) mit gravierenden Funktionsstörungen vorliegen. Bei der Ampelbeurteilung geht es um das, was Anlass zu Beanstandungen gibt. ( Es geht gewissermassen um eine defizitorientierte Betrachtungsweise, nicht um die Würdigung der Stärken der betreffenden Schule) 9

10 Zum Aussagegehalt der Ampelevaluation Es geht um eine zwar datengestützte, aber relativ undifferenzierte Urteilskommunikation, die in drei Farben ausgedrückt wird, grün = Zustand i.o.; es wurden keine gravierenden Probleme beziehungsweise keine negativen Auffälligkeiten festgestellt rot = Im betreffenden Untersuchungsbereich wurden nicht-tolerierbare Probleme festgestellt. Dringender Handlungsbedarf vorhanden! gelb = Zustand kritisch. Normalbetrieb ist gefährdet. Die Situation muss von den Verantwortlichen sorgfältig im Auge behalten werden. 10

11 Zum Aussagegehalt der Ampelevaluation Sind alle Ampeln auf grün, so zeigt dies an, dass die Funktionsfähigkeit der Schule gewährleistet bzw. nicht beeinträchtigt ist. ( Keine Funktionsstörung ) Rot gilt als Hinweis auf ein gravierendes Qualitätsdefizit mit Meldung an die Schulaufsicht BKS ( Gravierende Funktionsstörung vorhanden ) Falls der Verdacht auf ein Defizit in einem der acht Ampelbereich besteht, hat die differenzierte Abklärung dieses Bereichs während dem weiteren Evaluationsverlauf Vorrang gegenüber den anderen (entwicklungs-orientierten) Evaluationsschwerpunkten. 11

12 Beurteilte Grundfunktionen der Schule: Ampelbereiche Zielerreichung (Leistungstests fehlen noch!) Schul- und Unterrichtsklima Betriebsklima (Zufriedenheit der Lehrpersonen) Elternkontakte Erfüllung der Betreuungs- und Aufsichtsfunktion Schulleitung Q-Management Regelkonformität 12

13 Die 8 Ampelthemen Ampelthema 1. Zielerreichung (fachlich / überfachlich) 2. Schul- und Unterrichtsklima Leitende Frage Werden die grundlegenden Lernziele in den Fächern xy erfüllt? (Gibt es gravierende Abweichungen zum Erwartungswert?) Ist das Schul- und Unterrichtsklima an dieser Schule angstfrei, unterstützend, lernförderlich? (Gibt es gravierende Abweichungen zum Normwert?) Erfassungsmeth. Fachbezogene Leistungstests SchülerInnenbefragung (Klima-Instrument für SchülerInnen) Unterrichtsbeobachtung 13

14 Die 8 Ampelthemen Ampelthema 3. Arbeitsklima für Lehrpersonen 4. Elternkontakte Leitende Frage Ist das Arbeitsklima für LP angst frei, mobbingfrei - anregend, wertschätzend, identifikationsfördernd? (Gibt es gravierende Abweichungen zum Normwert?) Ist der Kontakt zw. Schule und Elternhaus funktionsfähig? Erfassungsmeth. Lehrerbefragung (Klima- Instrument für Lehrpersonen) Interviews mit LP, SL, Spfl. Fluktuationsrate schriftl. und mündl. Elternbefragung 14

15 Die 8 Ampelthemen Ampelthema 5. Erfüllung der Betreuungs- und Aufsichtsfunktion 6. Schulleitung Leitende Frage Wird die Betreuungs- und Aufsichtsfunktion der Schule so wahrgenommen, dass die Sicherheits- / Schutzfunktion gegenüber den Kindern gewährleistet ist? Gibt es eine funktionsfähige Schulleitungsstruktur? Gibt es Negativpunkte in der Dim 1 (Rollen, Zuständigkeiten und Aufgaben der Schulführung) und in der Dim 4 (Führen und Entwickeln des Personals) Erfassungsmeth. Schriftliche Elternbefragung; mündliche Befragungen von Eltern, SchülerInnen, Schulbehörden, Schulsozialarbeiter Schriftliche Befragung der Lehrpersonen, mündliche Befragungen von Schulleitung, Lehrpersonen, Schulbehörde 15

16 Die 8 Ampelthemen Ampelthema 7. Schulinternes Qualitätsmanagement 8. Regelkonformität Leitende Frage Gibt es eine funktionsfähige QM-Struktur. Werden minimale Formen des QM praktiziert? Gibt es Negativpunkte in der Dim 1 (Grundlegung des QM) und in der Dim 9 (Umgang mit Qualitätsdefiziten) Sind die Strukturen, Prozesse, institutionellen Rahmensetzungen in den wesentlichen Punkten regelkonform? Erfassungsmeth. Dokumentenanalyse mündliche Befragungen von Schulleitung, Lehrpersonen, Eltern, SchülerInnen, Schulbehörden Selbstdeklaration; Überprüfung durch das Inspektorat (Dokumentenanalyse, Befragung der Schulleitung, evtl. andere Personengp.) 16

17 Stärken des Ampelkonzeptes Klares, gut verständliches, ausserordentlich wirksames Kommunikationsinstrument. Bedeutsam für die Rechenschaftslegung bedeutungsvoll auch ohne explizite Sanktionierung. Rechenschaftslegung der externen Schulevaluation ist im Verfahren klar eingegrenzt. Verzicht auf eine differenzierte Normensetzung auf der Prozessebene dank Fokussierung auf Funktionsstörung Tendenz zur normativen Übersteuerung wird reduziert; der Gestaltungsspielraum für Schulen bleibt erhalten. Gravierende Qualitätsdefizite ( failing school ) ist nachvollziehbar definiert und für die Schulevaluation fassbar gemacht, 17

18 Schwächen des Ampelkonzeptes Erzeugt extrinsische Motivation für Veränderungsprozesse - Wirksamkeit ist umstritten. Grün wird falsch verstanden: grüne Schule = gute Schule man braucht nichts zu tun. Defizitorientierung des Ampelkonzepts: Schulen erhalten durch die Ampelevaluation keine aufbauenden Rückmeldungen Unangemessene Dominanz der Rechenschaftslegungskomponente in der Wahrnehmung der Schulen. Rote Ampel = massive Intervention (naming, blaming & shaming) Angstfaktor gegenüber der externen Schulevaluation steigt. Rote Ampel provoziert die Frage nach der Sanktionierung, die sich in unserem Schulsystem schlecht beantworten lässt. 18

19 Der Begleitprozess durch das Inspektorat: Konzeption & Erfahrungen 19

20 Qualitätsmanagement an der Aargauer Volksschule Schulinternes Qualitätsmanagement Kantonales Qualitätsmanagement Schulführung vor Ort Verschiedene Elemente wie Individualfeedback Selbstevaluation der Schule Steuerung des internen QM Inspektorat Aufsicht über die Qualitätsentwicklung Beratung von Schulpflege, Schulleitung und Lehrpersonen Externe Schulevaluation Unabhängige Beurteilung der Schulqualität durch Evaluationsfachpersonen 20

21 Aufgaben des Inspektorats gemäss Verordnung Aufsichts- und Beratungstätigkeit im Regelfall Pädagogische und fachliche Aufsicht ( 51 Schulgesetz) Überprüfung der Qualitätsstandards ( 2 Verordnung Geleitete Schule) Beaufsichtigung von Schulen ( 17 V Geleitete Schule) Berichterstattung ( 24 V Geleitete Schule) Bei Schulen mit Funktionsstörungen (rote Ampel) Genehmigung der Massnahmenplanung ( 26 V Geleitete Schule) Überprüfung der Massnahmenumsetzung ( 16 V Geleitete Schule) Kann Massnahmen anordnen ( 26 V Geleitete Schule) Anordnung der Nachevaluation ( 26 V Geleitete Schule) 21

22 Unterschiedliche Verfahren bei roten und grünen Schulen Die Ampelevaluation weist drei verschiedene Zustände aus: Funktionsfähigkeit grüne Ampel Gefährdung der Funktionsfähigkeit orange Ampel Funktionsstörung rote Ampel Je nach Ergebnis der Externen Schulevaluation gibt es zwei unterschiedliche Verfahren bei der Begutachtung und Überprüfung der Massnahmen durch das Inspektorat: Regelfall (grüne und orange Ampeln) Schulen mit Funktionsstörungen (rote Ampeln) 22

23 Vorgehen bei "grünen" und orangen Schulen Teilnahme des Inspektorats vor Ort an der Ergebnispräsentation und Kenntnisnahme des schriftlichen Berichts Erarbeitung eines Massnahmenplanes durch die Schule Kenntnisnahme des Massnahmenplanes durch das Inspektorat vor Ort Umsetzung der Massnahmen durch die Schule Überprüfung der Massnahmenumsetzung durch das Inspektorat vor Ort (im Rahmen des jährlichen Standortgesprächs) 23

24 Vorgehen bei "roten" Schulen Information an die Leiterin Kantonales Inspektorat Gespräch: Inspektorat (KL & RL), Schulführung (SL & SPF), Leitung FES Erarbeitung eines Massnahmenplanes durch die Schule Sichtung / Genehmigung der Massnahmenplanes durch Inspektorat Überprüfung der Massnahmen durch das Inspektorat Überprüfung der Massnahmenumsetzung durch das Inspektorat Nachevaluation durch FES (fokussiert auf roten Ampelbereich) Abschlussgespräch Schulführung (SL & SPF) und Inspektorat 24

25 Die Rolle der verschiedenen Akteure im Begleitprozess Leitender Grundsatze für den Begleitprozess: Die Führungsverantwortlichen sind in der Lage, auf der Basis des Evaluationsberichtes die gravierenden Funktionsstörungen zu beheben. Rolle der Schulpflege: Die Schulpflege ist für die Steuerung der Entwicklungsschritte und die Umsetzung der Massnahmen verantwortlich (strategische Ebene). Rolle der Schulleitung: Die Schulleitung setzt in Zusammenarbeit mit den Lehrpersonen die Konzepte und Massnahmen um (operative Ebene). Rolle des Inspektorats: Das Inspektorat begleitet den Prozess. Es beaufsichtigt und unterstützt die Schulführung bei der Planung und Umsetzung der Massnahmen. 25

26 Arbeitsweise des Inspektorats bei roten Schulen Das Inspektorat stellt sicher, dass die dringlichen Probleme angegangen werden und stellt Verbindlichkeit in der Umsetzung her. Moderationen im Zusammenhang mit dem Nachvollzug der Problemdiagnose Regelmässige Gespräche mit der Schulführung Kontakte zu definierten Ansprechpersonen Dokumentenanalyse und differenzierte Rückmeldungen Evtl. Zuweisungs- und/oder Vorgehensberatungen 26

27 Kennzahlen Zur Zeit sind ca. 170 Schulen evaluiert. Bis anhin haben 13 Schulen die Beurteilung Schulen mit Funktionsstörungen in folgenden Bereichen: Schulführung - 11 Schulen Qualitätsmanagement - 2 Schulen Arbeitsklima Lehrpersonen sowie das Unterrichtsklima je eine Schule 3 Schulen sind erfolgreich nachevaluiert. 10 Schulen befinden sich in unterschiedlichen Phasen des Begleitprozesses. 27

28 Erfahrungen aus der Arbeit mit "roten" Schulen (I) Anforderungen an den Prozess Ein standardisiertes Vorgehen im Begleitprozess ist für die betroffenen Schulen eine wichtige Orientierungshilfe. Die Kommunikationswege zwischen Schule und Inspektorat müssen genau geklärt sein. Alle Gespräche werden vom Inspektorat protokolliert. Die Schule legt die Dokumente Im Schulportfolio ab. Klares Signal, dass das Inspektorat für die Prozessführung zuständig ist: Alle Gespräche finden in Räumlichkeiten des Departements BKS statt. Massgeschneiderte Ausrichtung des Prozesses trotz Standardisierung: Jede Schule ist ein Einzelfall. Veränderungsprozesse brauchen viel Zeit: Zwei Jahre bis zur Nachevaluation sind notwendig. 28

29 Erfahrungen aus der Arbeit mit "roten"schulen (II) Ansprüche an das Inspektorat Die Vorbereitungen für die Überprüfungsgespräche sind zeitaufwändig. Die Gespräche sind anspruchsvoll. Enge Begleitung stellt zielgerichtetes Arbeiten sicher und bewahrt vor blindem Aktionismus. Sie erhöht die Verbindlichkeit zur Entwicklung. Die Zusammenarbeit innerhalb des Inspektorats müssen geklärt sein. Die Schnittstellen zur Fachstelle ESE müssen geklärt sein. 29

30 Erfahrungen aus der Arbeit mit roten Schulen (III) Rückmeldungen der Schulen Führungsverantwortliche sind emotional stark betroffen. Der Evaluationsbericht offizialisiert implizites Wissen über vorhandene Defizite. Schulen haben kaum bis wenig Erfahrung mit Projekt- und/oder Krisenmanagement. Wichtig sind Leaderfiguren, welche Führung übernehmen können. Schulen brauchen in der Regel externe Beratungspersonen. Nachevaluation nach zwei Jahren kann für die Schulen entlastend sein. Bei der Nachwirkungen zu einer roten Ampel kommt es in der Regel zu Personenwechsel in der Schulführung 30

31 Diskussionsanstoss Was finden Sie am Ampel-Konzept der externen Schulevaluation überzeugend, wo sehen Sie die kritischen Punkte? Wie gut gelingt es aus Ihrer Sicht, durch das Ampel- Konzept eine wirksame Intervention für "failing-schools" zu erzeugen? Gelingt es aus Ihrer Sicht, mit den 8 Ampelbereichen den Kern der "failing-school" angemessen aufzuschlüsseln? 31